본 기술은 CCTV 카메라나 일반 USB 카메라를 대상으로 얼굴 영상을 입력받아 얼굴을 자동으로 검출하고 검출된 얼굴로부터 딥러닝(deep learning)기술 및 랜드마크 검출에 기반해 조명, 표정, 포즈, 액세서리 변화에 강인한 표정 인식 기술이다.
표정인식 기술은 생체 신호에 기반한 다양한 감정인증 시스템에 비해 비 접촉식으로 생체정보 획득이 가능하여, 가장 사용자로 부터 인식에 따른 거부감이 적은 감정인식 기술이다. 그러나 타 생체정보에 비해 등록된 인식 정보와 입력된 인식 정보간의 차이가 카메라와 얼굴과의 거리, 조명, 표정, 포즈, 액세서리 변화 등에 따라 가변적으로 크게 발생하고, 시간이 지남에 따라 Aging에 영향을 받으며 표정 표현이 강하지 않으면 인식이 어렵다는 단점이 존재하였다.
딥러닝 기술이 알려지기 전까지, 기존의 표정인식 기술은 앞서 언급한 단점을 해결하지 못해 다양한 환경 변화에 강인한 인식 성능을 제공하지 못하였으나, 본 기술에서는 얼굴 표정 Big data에 기반한 최신 딥러닝 기술을 개발하여, 환경변화에 강인한 실시간 얼굴 표정인식 기술을 개발하였다.
. 기쁨, 슬픔, 놀람, 공포, 분노, 혐오 등 기본적인 6가지 감정을 학습시켰으나, 혐오 감정은 한국인이 짖기 힘든 감정으로 이를 평상으로 대치함
. 일반 CCTV 카메라나 저가의 USB 카메라 환경에서도 모두 적용 가능
. 640x480일반 사양의 컴퓨팅 환경에서 초당 1~5 프레임 이상의 실시간 얼굴 검출 및 인식
. 명암 정보를 사용한 얼굴 표정인식 기술
. 추출된 얼굴 영역은 128x128 이상되면 최적의 인식 성능을 보임
- 28 x 28 크기부터 얼굴 검출 및 인식이 가능하나 검출 크기가 작을수록 인식율이 감소함
. 동시에 다수의 얼굴이 입력돼도 검출 및 인식 가능
A. 기술명: 딥러닝기반 실시간 표정인식 기술
- 내국인 혹은 외국인 얼굴 실시간 자동 얼굴 검출 기술
- 내국인 혹은 외국인 얼굴 실시간 5가지 표정 인식 기술
B. 기술명 : 딥러닝기반 표정인식 기술 및 68포인트 랜드마크기반 표정인식 기술
- 내국인 혹은 외국인 얼굴 실시간 자동 얼굴 검출 기술
- 내국인 혹은 외국인 얼굴 실시간 5가지 표정 인식 기술
- 68 포인트 랜드마크 자동 검출기술
- 랜드마크 움직임에 기반한 표정 인식 기술
A. 기술명 : 딥러닝기반 실시간 표정 인식 기술
- 딥러닝기반 얼굴 자동검출, 표정인식 라이브러리 및 소스 코드
- window 버전
- Caffe 버전
B. 기술명 : 딥러닝기반 표정인식 기술 및 68포인트 랜드마크기반 표정인식 기술
- 딥러닝기반 얼굴 자동검출, 표정인식 라이브러리 및 소스 코드
- 실시간 68 포인트 랜드마크 검출, 랜드마크 움직임기반 표정인식 라이브러리 및
소스 코드
- window 버전
얼굴 표정 인식시스템은 현재도 출입자 관리, 화면 보호기, 은행 입/출입 및 얼굴 관련 콘텐츠 생성과 연관되어 인간의 감성에 따른 상황에 맞는 다양한 활용방안이 존재한다. 또한 본 기술은 국내 표정 인식 기술뿐 아니라 국외 표정 인식 기술을 사용하는 모든 나라에서 활용 가능한 장점이 있어, 기술이전 후 표정인식 시스템의 수출증대 효과가 있다.