상세정보
학술지
시간적 행동 구간 생성을 위한 LSTM 기반 단편 관련성 학습
Cited - time in 
Download 6 time
Share 
Download 6 time
Share
- 발행일
- 202006
- 출처
- 한국통신학회논문지, v.45 no.6, pp.975-978
- ISSN
- 1226-4717
- 출판사
- 한국통신학회 (KICS)
- 협약과제
- 20HS5100, (딥뷰-1세부) 실시간 대규모 영상 데이터 이해·예측을 위한 고성능 비주얼 디스커버리 플랫폼 개발, 배유석
- 초록
- 최근 많은 미디어 플랫폼의 발달로 비정형 비디오들의 수집과 접근이 용이해졌다. 이에 따라 비디오 이해를 위해 비정형 비디오에서 행동의 시작과 끝을 찾는 시간적 행동 검출 연구가 최근 활발히 이루어지고있다. 시간적 행동 구간 생성 방법은 Temporal Convolutional Network를 이용하여 행동 구간을 정의한다. 이와는 다르게, 본 논문에서는 행동을 시간적발생 순서에 따라 모델링 하기 위하여 LSTM을 이용한 방법을 제안한다. 제안하는 방법은 LSTM을 이용하여 단편 관련성 (Snippet Relatedness)를 평가하고이를 통해 행동 구간을 정의한다. 단편 관련성은 단편들이 서로 동일한 행동 구간에 포함되는지를 나타내는지표이다. 제안하는 방법은 THUMOS-14 데이터 셋에대한 실험에서 50개의 행동 구간 수 추출 시 41.34% 평균 리콜 성능을 얻어 BSN, MGG 보다 3.88%, 1.41% 우수한 성능을, SRG보다는 0.85% 떨어진 성능을 보였다.