In the evolving landscape of 5G networks, Network Data Analytics Function (NWDAF) emerges as a key component, interacting with core network elements to enhance data collection, model training, and analytical outcomes. Language Models (LLMs), with their state-of-the-art capabilities in natural language processing, have been successful in numerous fields. In particular, LLMs enhanced through instruction fine-tuning have demonstrated their effectiveness by employing sets of instructions to precisely tailor the model’s responses and behavior. However, it requires collecting a large pool of high-quality training data regarding the precise domain knowledge and the corresponding programming codes. In this paper, we present an open-source mobile network-specialized LLM, Mobile-LLaMA, which is an instruction-finetuned variant of the LLaMA 2 13B model. We build Mobile-LLaMA by instruction fine-tuning LLaMA 2 13B with our own network analysis data collected from publicly available, real-world 5G network datasets, and expanded its capabilities through a self-instruct framework utilizing OpenAI’s pre-trained models (PMs). Mobile-LLaMA has three main functions: packet analysis, IP routing analysis, and performance analysis, enabling it to provide network analysis and contribute to the automation and artificial intelligence (AI) required for 5G network management and data analysis. Our evaluation demonstrates Mobile-LLaMA’s proficiency in network analysis code generation, achieving a score of 247 out of 300, surpassing GPT-3.5’s score of 209.
As Internet traffic classification is a typical problem for ISPs or mobile carriers, there have been a lot of studies based on statistical packet header information, deep packet inspection, or machine learning. Due to recent advances in end-to-end encryption and dynamic port policies, machine or deep learning has been an essential key to improve the accuracy of packet classification. In addition, ISPs or mobile carriers should carefully deal with the privacy issue while collecting user packets for accounting or security. The recent development of distributed machine learning, called federated learning, collaboratively carries out machine learning jobs on the clients without uploading data to a central server. Although federated learning provides an on-device learning framework towards user privacy protection, its feasibility and performance of Internet traffic classification have not been fully examined. In this paper, we propose a federated-learning traffic classification protocol (FLIC), which can achieve an accuracy comparable to centralized deep learning for Internet application identification without privacy leakage. FLIC can classify new applications on-the-fly when a participant joins in learning with a new application, which has not been done in previous works. By implementing the prototype of FLIC clients and a server with TensorFlow, the clients gather packets, perform the on-device training job and exchange the training results with the FLIC server. In addition, we demonstrate that federated learning-based packet classification achieves an accuracy of 88% under non-independent and identically distributed (non-IID) traffic across clients. When a new application that can be classified dynamically as a client participates in learning was added, an accuracy of 92% was achieved.
최근 IT 기업이 개발자들의 능력을 평가하기 위하여 온라인 저지 시스템을 이용한 코딩 테스트를 활용함에 따라 IT 계열 구직자 또는 학생들은 코딩 테스트 문제 풀이 연습을 하고 있다. 하지만, 여러 가지 답안이 가능한 코딩 테스트의 특성상 문제 풀이에 어려움을 겪을 때 자신에게 알맞은 힌트를 찾아 해결하기 어려운 문제가 있다. 이러한 문제를 해결하기 위하여 본 연구는 코딩 테스트 사용자에게 사전에 정의된 힌트가 아닌 각각의 사용자가 제출한 소스 코드와 자료형 기반 소스 코드 거리가 가장 가까운 정답 소스 코드를 찾아 적합한 자료형을 힌트로 제공하는 방법을 제안하였다. 대학교 프로그래밍 교과목 5개 수업에서 수집한 소스 코드 데이터 29,592개를 분석한 결과 정확도가 평균 85.33%였으며 학생들의 수준에 따라 7% 정도의 차이가 났음을 보였으며 이는 제안 방법이 유용함을 나타낸다. 본 연구는 사전에 준비된 가이드가 아닌 사용자가 제출한 소스 코드에 기반하여 자동으로 튜터링하는 방법에 기여한다.
Today a large portion of Internet traffic is video. Over The Top (OTT) service providers offer video streaming services by creating a large distributed cloud network on top of a physical infrastructure owned by multiple entities. Our study explores insights from video streaming activity by analyzing data collected from Korea's largest OTT service provider. Our analysis of nationwide data shows interesting characteristics of video streaming such as correlation between user profile information (e.g., age, sex) and viewing habits, viewing habits of users (when do the users watch? using which devices?), viewing patterns (early leaving viewer vs. steady viewer), etc. Video on Demand (VoD) streaming involves costly (and often limited) compute, storage, and network resources. Findings from our study will be beneficial for OTTs, Content Delivery Networks (CDNs), Internet Service Providers (ISPs), and Carrier Network Operators, to improve their resource allocation and management techniques.
31 May 2022 in KIISE Transactions on Computing Practices
익명성이 보장되는 다크 웹과 가상화폐가 대중화됨에 따라 범죄자들은 불법 콘텐츠 거래를 쉽게 할 수 있게 되었다. 범죄 수사 기관은 다크 웹 모니터링을 통해 불법 콘텐츠 거래 내역 정황이 기록된 HTML 문서, 이미지 등을 수집하더라도 디지털 콘텐츠는 변조가 쉽기 때문에 법적인 증거 능력을 가지기 어렵다. 본 논문에서는 온-오프 블록체인 및 동적 콘텐츠 제거를 활용한 다크 웹 포렌식 증거 수집 소프트웨어를 제안한다. 디지털 콘텐츠의 포렌식을 위하여 다크 웹 수집 노드 및 검증 노드를 이용해 블록체인에 데이터 해시 값을 기록하여 무결성, 동일성, 신뢰성을 보장하였다. 수집 노드 및 검증 노드가 수집한 다크 웹 데이터는 HTML 문서뿐 아니라 이미지와 같은 대용량 파일로 구성되기 때문에 본 소프트웨어는 오프-블록체인을 통해 대용량 데이터를 공유하고, 데이터 해시 값을 온-블록체인에 기록한다. 이 연구는 다크 웹에서 수집한 데이터의 증거 능력을 보장하여 수사 기관이 다크 웹내 범죄 수사 및 모니터링을 할 수 있도록 기여한다.