Registered
APPARATUS AND METHOD FOR DETECTING ACTION BASED ON MULTI-MODAL
- Inventors
-
Kim Do-Hyung, Lee Jae Yeon, Minsu Jang, Kim Jae Hong
- Application No.
-
10-2017-0178137 (2017.12.22)
KIPRIS
- Publication No.
-
10-2019-0076380 (2019.07.02)
- Registration No.
- 10-2241705-0000 (2021.04.13)
- Country
- KOREA
- Project Code
-
17HS6500, Development of Human-care Robot Technology for Aging Society,
Lee Jae Yeon
- Abstract
- 멀티모달 행위 검출 장치 및 방법이 개시된다. 본 발명의 일실시예에 따른 멀티모달 행위 검출 장치는 사용자가 착용한 웨어러블 센서 장치 및 로봇에 장착된 로봇 센서 장치가 센싱한 데이터를 이용하여 상기 사용자를 행위를 검출할 대상으로 인식하는 인식부; 상기 센싱한 데이터가 포함하는 영상과 음성을 복수개의 엔진을 이용하여 상기 대상의 행위를 검출하는 검출부 및 상기 복수개의 엔진이 검출한 대상의 행위를 융합하여 상기 대상의 행위에 대한 이벤트 확률 리스트를 생성하는 이벤트 생성부를 포함한다.
- KSP Keywords
- Multi-modal