Registered
METHOD, APPARATUS AND SYSTEM FOR PROVIDING RESULTS OF TRANSLATION USING VISUAL INFORMATION
- Inventors
-
Jong Hun Shin, Huang Jinxia, Kim Young Kil
- Application No.
-
10-2021-0002716 (2021.01.08)
KIPRIS
- Publication No.
-
10-2022-0100366 (2022.07.15)
- Registration No.
- 10-2580559-0000 (2023.09.15)
- Country
- KOREA
- Project Code
-
20HS3900, Core technology development of the real-time simultaneous speech translation based on knowledge enhancement,
Kim Young Kil
- Abstract
- 시각적 정보를 이용한 통역 결과 제공 방법이 제공된다. 상기 방법은 사용자의 시선 정보를 포함하는 공간영역 영상 및 상기 공간영역 영상 내 응시지점 정보를 획득하는 단계; 상기 획득한 공간영역 영상을 복수 개의 영상으로 분할하는 단계; 상기 분할된 영상 각각에 대하여 텍스트가 포함된 텍스트 영역을 탐지하는 단계; 상기 탐지된 각 텍스트 영역에 대한 텍스트 인식 결과인 텍스트 블록을 생성하고, 상기 응시지점 정보에 상응하는 텍스트 블록을 결정하는 단계; 상기 결정된 텍스트 블록에 포함된 제1 언어를 목표언어인 제2 언어로 변환하는 단계; 및 상기 변환된 제2 언어 결과를 사용자에게 제공하는 단계를 포함한다.
- KSP Keywords
- Visual information