■ 주문형 네트워크 AI 데이터 사전처리 제어를 위한 네트워크 지능화 프레임워크(NIF) 시스템 요소 기술
- 사용자로부터 네트워크 트래픽 원시 데이터에 대한 사전처리 주문 요청을 수신하여 이를 위해 데이터 사전처리 처리 블록을 제어하는 기술
■ 주요 기능
- OpenAPI 3.0 규격을 따르는 개방형 API 기반의 AI 데이터 사전처리 자동화 요청, 사전처리 중단 요청 수신 및 처리 기능
- 네트워크 AI 데이터 관리 기능
- 네트워크 AI 데이터 인사이트 기능
- 네트워크 AI 데이터 공유 기능
■ 통신 네트워크 환경에서 네트워크 운영 관리나 최적화를 위한 AI 모델 개발을 위하여 네트워크 트래픽 데이터를 수집처리한 AI 학습 데이터셋 확보가 필수임
■ 하지만, 네트워크 트래픽 데이터는 단기간 수집만으로도 기가/테라급 이상의 방대한 양으로 네트워크 트래픽 데이터 처리에 대규모 시스템 구축이 요구됨
■ 또한, 같은 네트워크 트래픽 데이터일지라도 AI 모델마다 필요로 하는 학습데이터의 요구사항이 달라 수집된 네트워크 트래픽 원시 데이터를 AI 모델에 맞춤형으로 가공할 필요가 있음
■ AI 모델 개발을 위해서는 수집된 네트워크 트래픽 원시 데이터의 특성을 파악하기 위해 대규모 데이터를 처리하고 시각화하여 학습에 필요한 특징을 추출하는 과정이 필요함
■ AI 네이티브 네트워크 구현을 위해서는 네트워크 운용 관리를 위한 다양한 AI 모델 학습에 사용할 수 있는 데이터셋을 모아두고 이를 공유할 수 있도록 관리하는 AI 학습 데이터셋 레포지토리가 요구됨
■ 주문형 데이터 사전처리 제어 및 개방형 API 기술은 사용자가 제시한 사전처리 주문서에 따라 원시 데이터를 처리하는 절차를 제어하여 대규모의 네트워크 트래픽 원시 데이터를 가공함으로써 맞춤형 AI 모델 학습 데이터셋을 생성하는 기술임
■ 주문형 데이터 사전처리 제어 및 개방형 API 기술은 빅데이터 플랫폼을 구축 및 보유한 기관이 주문형 AI 학습데이터 생성 및 레포지토리 솔루션을 구축하기 위한 요소 기술로 활용 가능함
- 단순 수집형 빅데이터 플랫폼이 아닌, 사용자 주도형(On-demand) AI 데이터 가공 제어 구조 지원
- OpenAPI 3.0 기반의 표준 인터페이스 제공
- AI 모델별 맞춤형 데이터셋 자동 생성 기능
- 대규모 트래픽 데이터 분산처리 기반 효율적 전처리 수행
- 데이터 인사이트 및 시각화 기능으로 학습 데이터 품질 향상
- 외부 빅데이터 플랫폼(HDFS, MR, Yarn 등)과 연동 가능한 구조
주문형 데이터 사전처리 제어 및 개방형 API 기술
- AI 데이터 사전처리 요청, 사전처리 상태 조회 요청, 사전처리 결과 조회 요청, 사전처리 중단 요청의 수신 및 처리를 실행하는 OpenAPI 규격 기반의 자동화된 네트워크 AI 데이터셋 사전처리 기능
- 사전처리 주문서 목록 조회 요청, 네트워크 AI 데이터 데이터 및 메타데이터 조회 요청, 사전처리 주문서 삭제 요청의 수신 및 처리를 실행하는 OpenAPI 규격 기반의 네트워크 AI 데이터셋 관리 기능
- 네트워크 데이터 인사이트 처리 요청, 데이터 인사이트 처리 상태 요청, 데이터 인사이트 주문서 목록 조회 요청, 데이터 인사이트 데이터 조회 요청, 데이터 인사이트 시각화 요청의 수신 및 처리를 실행하는 OpenAPI 규격 기반의 네트워크 AI 데이터셋 인사이트 기능
- 네트워크 AI 데이터셋 및 메타데이터 다운로드 요청, 원시 데이터셋 및 메타데이터 다운로드 요청, 인사이트 데이터 다운로드 요청의 수신 및 처리를 실행하는 OpenAPI 기반의 네트워크 AI 데이터셋 공유 기능
주문형 데이터 사전처리 제어 및 개방형 API 기술
- 주문형 데이터 사전처리 제어 및 개방형 API 기술 요구사항정의서
- 주문형 데이터 사전처리 제어 및 개방형 API 기술 시험절차 및 결과서
- 주문형 데이터 사전처리 제어 및 사용자 인터페이스 프로그램 (소스코드)
- 주문형 데이터 사전처리 서브시스템 사용자 매뉴얼-REPSS 운용 방법
- 주문형 데이터 사전처리 서브시스템 사용자 매뉴얼-REPSS Web UI 사용 방법
- 주문형 데이터 사전처리 제어 블록 및 API 상세설계서
■ 주문형 네트워크 AI 학습용 데이터셋 생성 서비스
학습에 사용될 원시 데이터를 시간, 위치 및 상세 항목을 지정하여 수집 후, AI 모델에 맞춤형 데이터셋을 생성하기 위한 전처리 주문서에 따라 원시 데이터를 가공해 네트워크 AI 학습데이터를 주문형으로 생성하는 서비스에서 적용 가능
대용량 네트워크 원시 데이터를 가공하기 위해 별로의 플랫폼을 구축하지 않고도, 데이터 수집 시스템과 연계해 AI 모델 학습을 위해 원하는 형태로 원시 데이터를 가공할 수 있게 함으로써 보다 빠르고 쉽게 학습용 데이터셋을 확보할 수 있음
■ 네트워크 AI 모델 자동 학습 서비스
네트워크 AI 모델의 주기적 학습을 위해 원시 데이터를 수집하고, 수집한 원시 데이터 전처리를 수행하여 학습 데이터셋을 생성하고, 생성된 학습 데이터셋을 이용해 AI 모델의 재학습을 수행하도록 AI 모델의 자동 학습을 제공하는 서비스에서 적용 가능
본 기술은 한 번 수집한 네트워크 원시 데이터에 대해 AI 모델별로 상이한 학습 데이터를 맞춤형 전처리를 통해 생성할 수 있도록 지원하여 보다 쉽게 AI 학습 데이터셋 확보할 수 있게 됨으로써 전체적인 AI 모델 개발 시간과 비용을 단축 가능