Content vs. Context: Video Landmark Retrieval

Source

• Evernote/Inbox/Content vs. Context Visual and Geographic Information Use in Video Landmark Retrieval.md

Summary

이 논문은 스마트폰의 지리적 메타데이터를 활용한 비디오 랜드마크 검색을 다룹니다. 미디어 콘텐츠 기반 방법(SPM, Sparse Coding, LLC)과 지리적 컨텍스트 기반 방법(GeoLVD: 카메라 시야와 GIS 데이터의 교차를 통한 가시성 계산)을 비교 분석합니다.

Key Points

• 스마트폰의 위치 및 카메라 방향 메타데이터를 활용한 지리 참조 비디오 조직화 및 검색 기회 탐구
• 콘텐츠 기반 검색: Spatial Pyramid Matching(SPM)에 Sparse Coding(SC) 및 Locality-Constrained Linear Coding(LLC) 적용
• 지리적 컨텍스트 기반 검색: Geo Landmark Visibility Determination(GeoLVD) 제안
• GeoLVD는 카메라의 시야(FOV)와 GIS의 랜드마크 기하학적 정보 교차를 통해 랜드마크 가시성 계산

Related

• Robust and accurate mobile visual localization and its applications

• 다중 모드 특징 표현 및 시간 피라미드 매칭을 통한 콘텐츠 기반 복제 탐지

• 소셜 미디어 데이터를 활용한 위키백과 문서 지리참조

• 웹캠의 지리적 통합 및 보정 (Web-accessible geographic integration and calibration of webcams)

• 비디오 스트림에서 음향 및 시각적 단서를 이용한 광고 탐지

• 지오태그 이미지로부터 장면 위치 식별 (Identification of scene locations from geotagged images)

• Smartphones Based Crowdsourcing for Indoor Localization

• Query-Adaptive Image Search With Hash Codes

• iVector-based Acoustic Data Selection

• Attribute-Augmented Semantic Hierarchy (A2SH) for CBIR

• Geo-Store: 시맨틱 위치 기반 서비스 프레임워크

• 3DNN: Viewpoint Invariant 3D Geometry Matching for Scene Understanding

• 고양이 사진 메타데이터를 통한 위치 추적 프로젝트

• Understanding Indoor Scenes using 3D Geometric Phrases

• 다중 특징 분석 및 시맨틱 컨텍스트 학습을 통한 이미지 분류

• 스테가노그래피를 활용한 카메라

• Egocentric Field-of-View Localization Using First-Person Point-of-View Devices

• A Hamming Embedding Kernel with Informative Bag-of-Visual Words for Video Semantic Indexing

• Spatiotemporal Deformable Part Models for Action Detection

• Supervised Robust Discrete Multimodal Hashing (SRDMH)

• A Top-Down Approach for Video Summarization

• GPSView: 경치 중심의 운전 경로 계획 시스템

• MS의 상황 인지형 자동 무음 모드 기술

• 개인 사진 컬렉션에서의 공동 노이즈 레벨 추정

• PRIME: 단입자 Cryo-EM을 위한 확률적 초기 3D 모델 생성

• PD-Link: 카메라와 모바일 디바이스 연결 프레임워크

• Online Estimation of Evolving Human Visual Interest

• 관성 항법 시스템(INavigation Systems) 소개

• Weakly Supervised Learning of Object Segmentations from Web-Scale Video

• 3D 객체 검색을 위한 시맨틱 시그니처 학습

• Intel Research: Context Awareness - Social Proximity Detection

• 실내 장면의 의미적 및 기하학적 상호작용 학습을 위한 판별 모델

• 화자 추적 기반 영상 자막 배치 (Speaker-Following Video Subtitles)

• Video Snippets

• Discriminative Segment Annotation in Weakly Labeled Video

• 이마트 ‘세일 네비게이션’ (지능형 카트)

• 3D 센싱 기술, 모바일로 향하다

• Coordinated Multi-Device Presentations: Ambient-Audio Identification

• 움직이며 소리를 내는 객체의 식별 및 분할을 위한 다중모달 분석

• 스마트폰 기반 실시간 TV 채널 인식 기술 (IRTR)

• Near-duplicate video retrieval: Current research and future trends

• Efficient Closed-Form Solution to Generalized Boundary Detection

• Smooth Nonnegative Matrix Factorization for Unsupervised Audiovisual Document Structuring

• Sparse Hashing (SH) for Fast Multimedia Search

• 시간적 이미지 시퀀스를 위한 최적화된 만화 스토리텔링 시스템

• Cross-Media Tag Transfer (CMTT): 이미지에서 비디오로 태그 지식 이전

• K-RBMs를 이용한 다중 비선형 부분공간 학습

• 모바일 사진의 쇼핑 활용 (The Bigger Picture)

• 대규모 다중 라벨 전파를 위한 효율적인 희소 그래프 구성

• Cross-Domain Feature Learning in Multimedia

• 언어 독립적 시간 표현 판별적 파싱 (Language-Independent Discriminative Parsing of Temporal Expressions)

• 모바일 네트워크 데이터를 활용한 도시 감지 연구 조사

• Revealing the City That We Cannot See

• 실내 이동 객체를 위한 거리 기반 조인 (Distance-Aware Join for Indoor Moving Objects)

• 다중 사용자 생성 영상 기반 미적 가이드 요약 (Aesthetics-Guided Summarization)

• 정보 기하학을 통한 순수 고차 단어 연관성 마이닝

• 사용자 이동성 프로파일 구축 및 비교

• Script-to-Movie: 스크립트 기반 자동 영화 생성 프레임워크

• Video Resumer: YouTube 시청 위치 기억 확장 프로그램

• IDDiscovery 관련 생각

• 사회적·물리적 거리감이 정보 필요성에 미치는 영향

• Interactive Image Tagging을 위한 인간 라벨링 최적화

• GeoVisNews: 뉴스 조직 및 검색 시스템

• 커뮤니티 매핑 (Community Mapping)

• CPCDN: Context 및 User Intelligence 기반 콘텐츠 전달

• 택시 GPS 추적 데이터 마이닝 연구 동향

• 사회적·공간적 근접성을 활용한 공동 검색 (Joint Search by Social and Spatial Proximity)

• Robust Localization From Incomplete Local Information

• TRECVID 기반 콘텐츠 기반 비디오 복사 탐지 벤치마킹

• Transfer Joint Embedding for Cross-Domain NER

• A survey on ear biometrics

• Social Event Classification via Boosted Multimodal Supervised Latent Dirichlet Allocation

• 인간 동작 분석을 위한 특이값 분해(SVD) 기반 지식 획득 방법

• Double Music Player: 두 개의 이어폰에 다른 음악 재생

• 지리공간 사회 컴퓨팅 환경 생성 프레임워크

• 이미지 주석 및 검색을 위한 Feature-Word-Topic 모델

• 다중 Kinect 기반 실시간 3D 재구성

• All Smiles: 얼굴 표정 분석을 통한 자동 사진 보정

• Cross-Domain Multi-Event Tracking via CO-PMHT

• 확산형 실내 광무선 통신 링크의 심볼간 간섭 완화를 위한 분류기 비교 연구

• 오디오의 역할

• Dynamic Time Warping for Music Conducting Gestures Evaluation

• YouTube 채널 분류를 위한 실용적 시스템

• 위치 기반 관심사 검증 매칭 알고리즘 (구글 특허)