영화, 드라마와 같은 실사 영상과 애니메이션과 같은 비실사 영상에서 등장하는 캐릭터를 검출하고, 인식하여 저작물을 식별할 수 있는 기술
ㅇ 핑거프린트(또는 콘텐츠 DNA) 기반 저작물 영상 식별 기술의 문제점을 보완할 수 있는 딥러닝 기반 식별 기술이 필요
ㅇ 딥러닝 기반 배우얼굴/의상/애니메이션 캐릭터 인식 및 동영상 분석 엔진 최적화가 핵심기술로 대규모의 영화/TV드라마 아카이브 관리를 위한 필요성 증대
ㅇ 콘텐츠 연동형 상품 판매 사업들은 상업 영상에 등장한 패션 아이템을 사람이 태깅하는 방식으로 진행하고 있으나, 패션 아이템을 수동으로 태깅하는 일은 많은 시간과 비용이 듦. 이러한 문제점을 해결 및 보완할 수 있는 기술이 필요
- 의상 인식 기술은 배우 의상 인식 기반 미디어 커머스 서비스의 핵심 기술
ㅇ 콘텐츠 연동형 상품 판매 사업에 필요한 의상 자동 인식 기술의 요구 증대
ㅇ 애니메이션 캐릭터 검출 및 인식 기술
- 애니메이션 영상 내 인간형/비인간형 캐릭터 통합 검출 (검출 정확도: 90% 이상)
- 애니메이션 영상 내 주요 인간형/비인간형 캐릭터 인식 (400종, 인식 정확도: 99%(closed-set), 90%(open-set))
- 캐릭터 인식 기반 애니메이션 영화 식별 가능
- 애니메이션 영상 내 캐릭터별 숏클립 생성 가능
ㅇ 상업용 영상 내 배우 의상 자동 인식 기술
- 상업용 영상 대상 의상 검출(상반신)
- 다양한 환경 변화에 강인한 의상 재인식
- 재인식 모델 특징점 기반 의상 고속 매칭
- 상업용 영상 대상 의상 태깅 기술
- 의상 재인식 정확도를 높이기 위한 배우 얼굴 인식 기술과 연동 (얼굴 인식 기술은 별도 판매 또는 기보유한 솔루션 사용시 가능)
- 배우 얼굴 인식 후 의상 재인식 정확도: 99.6%
<기술이전 내용>
ㅇ 1세부기술 : 애니메이션 캐릭터 검출 및 인식 기술
- 2D/3D 애니메이션 영상 내 캐릭터 검출 기술
- 2D/3D 애니메이션 영상 내 캐릭터 인식 기술
ㅇ 2세부기술 : 상업 영상 내 배우 의상 인식 기술
- 상업용 영상 대상 배우 의상 검출 기술(상반신)
- 상업용 영상 대상 배우 의상 재인식 기술
<기술이전 범위>
ㅇ 1세부기술 : 애니메이션 캐릭터 검출 및 인식 기술
- 애니메이션 캐릭터 검출 모듈 (소스코드)
- 애니메이션 캐릭터 인식기 학습 모듈 (소스코드)
- 애니메이션 캐릭터 인식 모듈 (소스코드)
ㅇ 2세부기술 : 상업 영상 내 배우 의상 인식 기술
- 배우 의상 검출 모듈 (소스코드)
- 배우 의상 재인식 모듈 (소스코드)
ㅇ 적용분야
- 스마트 VOD 서비스 (영상 내 주요 배우/캐릭터별 출연구간 재생 서비스)
- 객체(캐릭터/의상) 인식 기반 콘텐츠 검색 미디어 커머스 솔루션
- 배우얼굴 및 의상 인식 기반 요약편집 저작물 영상 식별 및 모니터링 솔루션
ㅇ 기대효과
- 실사/비실사 영화 저작물의 지능형 필터링 및 모니터링으로 불법유통 방지
- 콘텐츠 연동형 상품 판매를 위한 의상 정보 태깅 작업에 필요한 과도한 시간, 비용 문제 해결
- 사용자에게 자동 의상 인식을 통한 차별화된 동영상 제공 서비스 가능