본 기술은 로봇이 사람과 대화를 통해 교류하는데 필요한 시스템 통합 기술로서 각종 인식, 판단, 표현 모듈들을 연동하고 대화관리를 통해 교류 흐름을 제어하는 기능을 포함
o 목적
대화를 중심으로 사람과 상호작용하는 서비스 로봇의 응용 수행에 필요한 인식, 판단, 표현 모듈 연동과 대화관리를 통한 교류 흐름제어 기능을 제공하고자 함
o 필요성
- 사람과 대화하면서 상호작용하는 서비스 로봇의 응용을 개발하고 실행하기 위해서는 다수의 인식, 판단, 표현 모듈을 유기적으로 연동할 수 있는 SW 통합 프레임워크가 필요함
- 인간-로봇 상호작용의 대화 기반 교류 흐름을 저작하고 실행하기 용이한 챗봇 중심의 대화관리 기능이 필요함
- 영상, 음성 등 다양한 형식의 데이터를 입력으로 받아 각종 상황이해 관련 정보를 산출하여 활용하고 로봇을 통해 발화와 제스처를 동시에 표현하는 멀티모달 교류 제어 기능이 필요함
ㅇ ROS(Robot Operating System) 기반 모듈 통합으로 개방성과 확장성 제공
ㅇ 인식 결과 누적 판단을 통해 안정적인 상황인식 결과 제공
ㅇ 사용자의 얼굴, 이름, 외형 특징을 기억하고 회상하여 교류 경험 개인화 가능
ㅇ 인식기의 실행 시점 제어를 통해 인식 기능 실행 부하 관리 가능
ㅇ 추상화를 통해 다양한 모듈의 선별 통합과 이벤트 추가/삭제가 용이함
ㅇ 멀티모달 이벤트 입력 처리가 가능한 챗봇 확장 언어와 엔진 지원
ㅇ 멀티모달(발화+제스처) 로봇 행위 표현을 위한 간단한 구문과 제어 기능 지원
o ROS 기반 인식, 판단, 표현 연동 기술
o 교류 상황 인식 기술
o 멀티모달 대화관리용 챗봇 기술
o 일화기억 저장관리 기술
o ROS 기반 인식, 판단, 표현 연동 프레임워크 SW
- 영상기반 사람검출/추적, 얼굴추적/인식, 성별/안경/머리카락길이/상의색상 인식 모듈 연동
- 음성인식 모듈 연동
- 교류상황인식모듈과대화관리용챗봇모듈연동
- 로봇 발화(TTS), 제스처 제어 모듈 연동
o 교류 상황 인식 모듈 SW
- 사용자 등장/퇴장, 집중 여부 판단
o 멀티모달 대화관리용 챗봇 SW
- 규칙기반 대화 흐름 제어
- 멀티모달 상황인지 이벤트 입력 지원
- 멀티모달 로봇행위 제어 명령 출력 지원
o 일화기억 저장관리 모듈 SW
- 사용자별 자동 얼굴과 외형특징 기억
- 사용자얼굴인식기반이름,외형특징,과거교류정보회상
ㅇ 적용 분야
- 대화를 중심으로 상호작용하는 서비스 로봇의 통합 플랫폼으로 활용
- 홈서비스 로봇, 교육로봇, 안내로봇, 케어로봇 등 다양한 분야 적용 가능
- 영상 입력을 포함하는 스마트 스피커의 상황 인지와 대화 엔진으로 활용
ㅇ 기대효과
- 인식, 판단, 표현 모듈의 추가 연동과 제거가 용이하므로 빠르게 분야별로 최적화된 로봇 기능 통합과 제품화가 가능
- 대화 스크립트 저작만으로 로봇 응용를 개발할 수 있으므로 다수의 다양한 응용 개발 적용이 가능하며 그에 따른 비용을 대폭 절감
- 다양한 공공건물과 장소에서 로봇 서바스를 가능하게 함으로써 고객의 관심을 효과적으로 유도하고 반복적 방문을 독려할 수 있음
- 교류 경험 누적 데이터를 기반으로 교류 시나리오의 지속적인 개선이 가능하며, 제한적인 학습 기능을 통해 사용자별로 차별화된 교류 경험을 제공함으로써 응용 목적의 지속성을 개선할 수 있음