본 기술이전은 해양 쓰레기 탐지와 세그멘테이션을 지원하는 RF-DETR 모델을 NVIDIA 젯슨 Orin AGX 보드에서 구동하여 실시간 비전인식을 제공하기 위한 것이다.
본 기술은 온디바이스 추론엔진 SW와 온디바이스 해양 쓰레기 비전인식 응용 SW로 구성된다.
- 본 기술은 클라우드기반 비전인식 서비스의 한계인 실시간 응답성, 네트워크 지연, 개인정보 보호 등을 해결할 수 있는 온디바이스기반 비전인식 서비스를 가능하게 하는 온디바이스 AI SW 기술을 제공하는 것을 목적으로 한다.
- 온디바이스 HW 시스템의 컴퓨팅 자원 제약으로 기존의 서버/클라우드 HW 시스템을 위해 개발된 인공지능 기술의 활용 한계를 극복하여 급속히 증가하고 있는 온디바이스 AI 기술에 대한 산업계 수요에 대응하기 위해 필요하다.
- 특히, 본 기술이전은 수상 로봇에 탑재되는 임베디드 보드 상에서 실시간 해양 쓰레기 객체 비전인식 기술에 대한 기업의 수요에 맞춤화된 온디바이스 AI SW 솔루션형 기술로 제공하고자 한다.
본 기술은 보편적으로 활용되고 있는 로봇탑재용 온디바이스 보드 HW(CPU+GPU)와 운영체제에 최적화된 온디바이스 AI 모델 뿐만 아니라 추론엔진 SW 를 포함하는 기술임이 큰 장점
- ARM 및 Nvidia Embedded GPU 기반 HW와 Embedded 리눅스 운영체제가 탑재된 임베디드 시스템 지원
1. 수상 로봇 탑재용 해양 쓰레기 실시간 비전인식 지원 온디바이스 AI SW 기술
1.1 온디바이스 추론엔진 SW 기술(RF-DETR 모델 추론용)
: 온디바이스 추론엔진 코어
: 온디바이스 추론 비디오 입력 파이프라인 관리기
: 온디바이스 추론 최적화기
: 온디바이스 추론 학습모델 해석기
1.2 온디바이스 해양 쓰레기 비전인식 응용 SW 기술
: 온디바이스 해양 쓰레기 객체 탐지(Object Detection) 응용 SW
: 온디바이스 해양 쓰레기 개체 세그멘테이션(Instance Segmentation) 응용 SW
(쓰레기 분류: 나무및 갈대,스티로폼, 페트병, 그 외)
1. 프로그램
- 온디바이스 RF-DETR 모델 추론엔진 SW 기술(라이브러리)
- 온디바이스 해양 쓰레기 비전인식 응용 SW 기술(소스)
2. 특허
3. 기술 문서
- 본 기술은 임베디드 보드가 탑재되는 다양한 지능형 디바이스 기반 신 서비스 및 제품 발굴에 활용 가능한다.
- 본 기술은 임베디드 보드 탑재형 제품 제조 산업계에서 범용적으로 활용되는 HW 및 운영체제 사양에 최적화되어 있어 관련 제품 경쟁력 향상과 산업 활용도가 높을 것으로 기대됨