BROWSE
Detail
Conference Paper
XR 협업 환경에서 사용자 비언어적 상태 인지와 지식맵 기반 지능형 상호작용 시스템 설계
Cited - time in 
Share 
Share
- Authors
- 양웅연
- Issue Date
- 2026-06
- Citation
- 한국컴퓨터 종합 학술대회 (KCC) 2026, pp.1-3
- Publisher
- 한국정보과학회
- Language
- Korean
- Type
- Conference Paper
- Abstract
- 고위험 산업 훈련에서는 소음, 보호장비, 제한된 시야, 원격 협업으로 인해 언어만으로 훈련생의 이해와 위험 인지를 충분히 전달하기 어렵다. 본 논문은 XR HMD와 웨어러블에서 수집한 시선, 심박, 손동작, 음성 운율을 통합하여 사용자 비언어적 상태(UNVS) 모델 표현을 중심으로 현재 연 구 개발이 진행 중인 시스템을 소개한다. 이 시스템은 입력 수집, 크로스모달 정합, UNVS 판정, 지식맵 기반 해석, 메타포어 기반 적응형 개입으로 구성되며, 신뢰도와 근거를 포함한 상태 스냅 샷으로 교관의 검토와 개입을 지원한다. 또한 머신러닝 기반 후기 융합, RAG, 시계열-언어 정렬로 플랫폼을 확장하여, XR 훈련 시스템의 설명가능성과 안전성 향상에 기여할 것으로 예상된다.