ETRI-Knowledge Sharing Plaform

KOREAN
연구보고서 검색
Type Funding Org. Research Org.
Year ~ Keyword

Detail

비대면 커머스를 위한 실공간 변형 합성 기술 개발 (최종)
Download 3 time
Participants
손욱호, 구본기, 박혜선, 서병국, 김갑기, 최진성, 박일규, 김용선, 강현, 김재헌
Published
202202
Type
Annual Report
Keyword
실시간 실측 공간 정보 추출, 실 공간 캡처, 외형 정보 추출, 비가시 배경 복원, 증강 현실, 객체 가상 제거, Mixed Reality, Augmented Reality, 3D Manipulation of a Real Object, Inpainting, Shape Completion
KSP Keywords
3D manipulation, E-commerce
Funding Org.
과학기술정보통신부
Research Org.
한국전자통신연구원
Project Code
21HH3900, Mixed Reality Augmented Reality 3D Manipulation of a Real Object Inpainting Shape Completion, Koo Bonki
Abstract
연구개발 목표 및 내용
최종 목표
❐ 실 공간 기반의 실/가상 객체 배치, 이동 및 실감 합성 기술 개발 및 비대면 구매 서비스 구축
(개념) 스마트폰 혹은 패드를 통해(MR 환경에서) 자신의 아파트 거실을 보면서 기존 실제 소파를 삭제 또는 이동, 구매할 소파(가상)를 배치, 조명 위치와 색상변화에 따른 거실의 Look & Feel까지도 3차원 실제 공간 內 여러 시점에서 가시화
AS-IS
◦단순 오버레이 기반 증강
◦평면만 인식(예:IKEA Place)
◦실 객체 물리적 이동 및 빈 공간 필요
◦개인 환경 고려 않음(쇼룸, 단순 배치)

TO-BE
◦실세계 공간/객체기반 증강
◦평면+공간/객체 단위 인식
◦MR 환경 실객체 제거, 이동 등 재배치
◦개인 환경 최적화

전체내용
❐ 세부 연구 내용
① 실시간 실측 공간 정보 추출 기술
- 실 공간 캡처 센서의 자세, 조명 등 정보 추출 기술
- 실 공간 객체의 3차원 형상 추정 기술
② 실 객체 외형 정보 추출 및 비가시 객체 영역 복원 기술
- 실 공간 객체 외형 정보 추출 기술
- 비가시 전경 영역 3차원 형상/텍스처 복원 기술
③ 비가시 배경 영역 복원 및 실/가상 합성 기술
- 영상 내 객체 영역 제거 및 합성 영상 생성 기술
- 3차원 객체 영역 제거 및 합성 모델 생성 기술
④ 비대면 상품 구매 시범 서비스 구축
- 모바일 증강현실내 실 객체 가상 제거 기반 상품 배치 서비스 구축
- 모바일 증강현실내 실 객체 가상 제거/이동 기반 상품 재배치 서비스 구축

연구개발성과
❐ 연구개발 주요 기술 결과물
▸실시간 변형 통합 SW 4종⇒모바일앱 1종
▸실시간 실측 공간 정보 추출 SW
- 변형 합성 다중 사용자 공유 기능
- 실공간 조명정보 추출 기능
- 실측 정확도 보정 기능
▸객체 외형 정보 추출 및 비가시 객체 영역 복원 SW
- 선택 객체 영역 분할 기능
- 비가시 객체 영역 복원 기능
▸비가시 배경 영역 복원 및 실/가상 합성 SW
- 배경 영상 합성 기능
- 비가시 배경 영역 복원 기능
▸비대면 상품 구매 시범 서비스(SW, 모바일앱, 서비스 플랫폼)
- 모바일 증강현실내 실 객체 가상 제거/이동 기반 상품 재배치 기능
❐ 핵심 기술 성능지표(목표 대비 실적)
❐ 정량적 연구개발성과표

연구개발성과 활용계획 및 기대 효과
❐ 활용계획
▸“실공간 변형 MR 기술”을 소상공인 등 수요 기업을 활용, 시범 서비스 등에 적용, 검증 이후 본격적인 서비스 확대 기여
▸가구, 인테리어, 디자인, 패션 등 다양한 서비스 환경 맞춤형 비대면 거래가 가능한 서비스 개발 및 실제 환경을 배경으로 동작하는 MR 게임으로 확대 적용
❐ 기대효과
▸MR 환경에서 실물의 제거, 이동, 회전을 지원하여 가상과 현실의 경계를 허무는 차세대 MR 핵심원천기술 확보로 비대면 시대 경제성장 견인 및 신산업 창출
▸대면환경과 동일한 비대면 환경에서 구매 가능한 실공간변형 서비스 제공으로 사용자의 사실감 있는 상품 선택권 제공으로 비대면 e-커머스 활성화 기여

(출처 : 요약문 4p)