AncomWiki

Online Estimation of Evolving Human Visual Interest

Properties1
description이 논문은 비디오 스트림에서 인간의 시각적 관심사(ROIs)를 예측하기 위한 '인간-인-더-루프(human-in-the-loop)' 상호작용 프레임워크를 제안합니다. 눈동자 추적 데이터와 비디오 콘텐츠를 결합하여, 갑작스러운 눈 움직임으로 인한 시간적 불연속성, 노이즈, 행동적 아티팩트 등을 고려한 시각적 주의 모델을 구축합니다. 이를 통해 아직 보지 못한 프레임의 시각적 돌출도(saliency)를 예측하며, 비디오 리타겟팅…

6 min read

Online Estimation of Evolving Human Visual Interest

Source

  • Evernote/Inbox/Online Estimation of Evolving Human Visual Interest.md

Summary

이 논문은 비디오 스트림에서 인간의 시각적 관심사(ROIs)를 예측하기 위한 ‘인간-인-더-루프(human-in-the-loop)’ 상호작용 프레임워크를 제안합니다. 눈동자 추적 데이터와 비디오 콘텐츠를 결합하여, 갑작스러운 눈 움직임으로 인한 시간적 불연속성, 노이즈, 행동적 아티팩트 등을 고려한 시각적 주의 모델을 구축합니다. 이를 통해 아직 보지 못한 프레임의 시각적 돌출도(saliency)를 예측하며, 비디오 리타겟팅(화면 비율 조정 시 정보 보존) 및 스마트 자막 삽입 등 응용 분야에 활용 가능합니다.

Key Points

  • 비디오 내 인간 시각적 관심 영역(ROIs) 예측을 위한 상호작용 프레임워크 제안
  • 눈동자 추적(Eye tracking)과 비디오 콘텐츠 기반의 시각적 주의 모델링
  • 갑작스러운 눈 움직임, 노이즈, 행동적 아티팩트 등 눈동자 추적 특성의 시간적 불연속성 고려
  • 미관측 프레임에 대한 시각적 돌출도(Visual Saliency) 예측
  • 응용 분야: 정보 보존형 비디오 리타겟팅, 스마트 자막(Closed-caption) 삽입

그래프 뷰

백링크