본 기술은 사용자의 인체를 검출하고 전신 관절을 추적하여 실 공간에 존재하는 사용자가 콘텐츠와 자연스러운 상호작용 및 프로젝션을 활용한 증강 가시화를 가능하도로 하는 기술임
- 키넥트를 활용한 사용자 인체 검출 및 동작 추적에 관한 마이크로소프트의 상용 기술은 사용자 정면에 설치되어야 하는 한계가 있음
- 본 기술은 사용자의 몰입도를 최대로 하는 대형 프로젝션 스크린 환경에서 체험시 몰입도를 저해하지 않는 탑뷰 영상 분석을 통해 인체를 검출/추적하고, 그 인체의 포즈를 추정하고 콘텐츠 가시화에 반영하여 자연스럽고 직관적이며 편리한 상호 작용을 위한 핵심 기반 기술을 제공함
- 연구개발 결과물로서 산출된 “인체 프로젝션을 위한 다수 사용자 전신 추적 및 동작 인식 기술”을 인터랙티브 가상현실 콘텐츠를 활용하는 콘텐츠 제작 업체 등에 이전하여, 실용화 기술을 보급하고 가상객체 및 사용자간 자연스러운 인터랙션이 이루어질 수 있는 인터랙티브 콘텐츠 및 시스템 제어 기술의 보급에 목적을 둠
- 정면뿐만 아니라 탑뷰(Top view)에서 획득한 깊이 영상으로부터 사용자 인체 검출 및 동작 추적이 가능
- 체험자의 쉽고 편리한 제어를 위해 체험자 전신 관절을 추적하여 그 결과로 검출되는 팔, 손 등의 인체 부위 상에 콘텐츠를 증강 프로젝션한 후,
이와 체험자가 실감나게 상호작용할 수 있도록 하는 장점이 있음
- 체감형 시스템 환경 제어를 위해 본 인터랙션 기술이 플러그인 형태로 제공이 가능함
o 기술명 : 인체 프로젝션을 위한 다수 사용자 전신 추적 및 동작 인식 기술
- 탑뷰 기반 다수 사용자 전신 검출 및 추적 기술
- 탑뷰 기반 사용자 동작 인식 기술
- 인체 프로젝션 가시화 표현을 위한 표면 검출 및 추적 기술
o 세부기술명: 탑뷰 기반 다수 사용자 전신 검출 및 추적 기술
- 탑뷰 기반 다수 사용자 바디(손/팔/머리/어깨) 검출 및 추적 기술
- 탑뷰 기반 다수 사용자 전신 검출 테스트용 데이터
- 인터랙티브 콘텐츠 제작용 Unity 엔진 플러그인
o 세부기술명: 탑뷰 기반 사용자 동작 인식 기술
- 실공간 사용자 지시 동작 인식 기술
- 평면 검출 기반 사용자 터치 동작 인식 기술
- 인터랙티브 콘텐츠 제작용 Unity 엔진 플러그인
o 세부기술명: 인체 프로젝션 가시화 표현을 위한 표면 검출 및 추적 기술
- 사용자 인체 표면 검출 및 추적 기술
- 사용자 인체 가시화 표현을 위한 Unity 엔진 플러그인
- 표면 검출 및 추적 관련 매뉴얼 문서
- 실내 테마파크, 인터랙티브 체험관 및 텔레컨퍼런스 등에 활용 가능함
- 사용자의 몰입도를 높이기 위해 대형 스크린을 사용한 체험관 및 실내 테마파크에서 탑뷰 기반 사용자 인터랙션을 지원함으로써 체험시 몰입도를 높일 수 있음
- 사용자의 동작 변화에 맞추어 인체 표면에 프로젝션하기 위한 표면 검출뿐만 아니라 사용자 동작 분석을 위한 동작 데이터 획득도 가능하므로 추후 스포츠 동작 분석기 등에 활용 가능함
- 드론, 셀프 카메라, 퍼스널 모빌리티개인 라이프 로그 기기 등을 활용한 이동형 장비 기반 인터랙션 분야로의 확대가 가능함