ETRI-Knowledge Sharing Plaform

KOREAN
논문 검색
Type SCI
Year ~ Keyword

Detail

Conference Paper 캘리브레이션 된 2 시점 영상으로부터의 3 차원 휴먼 복원
Cited - time in scopus Share share facebook twitter linkedin kakaostory
Authors
홍진규, 노승영, 이희경, 추현곤, 장주용
Issue Date
2023-11
Citation
한국방송·미디어공학회 학술 대회 (추계) 2023, pp.1-4
Publisher
한국방송·미디어공학회
Language
Korean
Type
Conference Paper
Abstract
본 논문에서는 단일 시점 영상으로부터의 3D 휴먼 메쉬 추정을 위해 일반적으로 사용되어온 내재 함수 기반방법을 2 시점으로 확장한다. 단일 시점 모델은 단일 영상만을 사용하여 가리워져 보이지 않는 부분까지 추정해야하므로, 추정된 메쉬와 실제 참값 사이의 큰 오차를 피하기 어렵다. 캘리브레이션 된 2 시점 영상을 입력으로 활용할 경우 이러한 문제를 단순하지만 매우 쉽게 해결할 수 있다. 구체적으로 제안하는 방법은 최근 제안된 깊이 맵기반의 단일 시점 휴먼 복원 방법을 기반으로 한다. 제안하는 방법은 픽셀 정렬 특징을 적극적으로 활용하여 앞/뒤 입력 영상 및 깊이 맵의 각 픽셀을 2D 특징 맵의 픽셀과 직접 연관시킨다. 또한 앞/뒤 깊이 맵을 융합하여 생성된 3D 볼륨으로부터 복셀 정렬 특징을 얻고, 이를 메쉬 복원을 위한 사전 정보로 활용한다. 실험을 통해 제안하는 방법이 기존 단일 시점 모델들에 비해 정량적, 정성적으로 우수한 메쉬 추정 성능을 달성함을 보인다.