Attribute-Augmented Semantic Hierarchy (A2SH) for CBIR

Source

• Evernote/Inbox/Attribute-Augmented Semantic Hierarchy Towards a Unified Framework for Content-Based Image Retrieval.md

Summary

본 논문은 콘텐츠 기반 이미지 검색(CBIR)의 의미적 격차와 의도적 격차를 해소하기 위해 ‘속성 증강 의미 계층(A2SH)’ 프레임워크를 제안한다. A2SH는 의미 개념을 다중 계층으로 조직화하고, 각 개념에 관련 속성을 추가하여 저수준 시각적 콘텐츠와 고수준 개념 간의 중간 다리 역할을 하게 한다. 또한 이미지 간 의미적 유사성을 특징짓는 계층적 의미 유사도 함수를 학습하고, 사용자 검색 의도를 더 잘 포착하기 위해 속성과 이미지에 대한 하이브리드 피드백 메커니즘을 개발한다.

Key Points

• 속성 증강 의미 계층(A2SH) 프레임워크 제안
• 의미 개념의 다중 계층 조직화 및 속성 증강을 통한 저수준 시각적 콘텐츠 연결
• 이미지 검색을 위한 계층적 의미 유사도 함수 학습
• 사용자 검색 의도 포착을 위한 속성 및 이미지 기반 하이브리드 피드백 메커니즘

Related

• A Hamming Embedding Kernel with Informative Bag-of-Visual Words for Video Semantic Indexing

• Browse-to-Search: 시각적 엔티티를 활용한 탐색적 검색

• Supervised Robust Discrete Multimodal Hashing (SRDMH)

• 다중 모드 특징 표현 및 시간 피라미드 매칭을 통한 콘텐츠 기반 복제 탐지

• Social-Sensed Image Search

• Query-Adaptive Image Search With Hash Codes

• Sparse Hashing (SH) for Fast Multimedia Search

• 비디오 검색 결과의 의미론적 계층 구조화

• Cross-Media Tag Transfer (CMTT): 이미지에서 비디오로 태그 지식 이전

• 3D 객체 검색을 위한 시맨틱 시그니처 학습

• 다중 특징 분석 및 시맨틱 컨텍스트 학습을 통한 이미지 분류

• Content vs. Context: Video Landmark Retrieval

• Cross-Domain Feature Learning in Multimedia

• Discriminative Segment Annotation in Weakly Labeled Video

• Semantic Queries by Example

• K-RBMs를 이용한 다중 비선형 부분공간 학습

• Script-to-Movie: 스크립트 기반 자동 영화 생성 프레임워크

• 정보 기하학을 통한 순수 고차 단어 연관성 마이닝

• A Top-Down Approach for Video Summarization

• 그래프 전파를 통한 개인화 비디오 추천

• 시간적 이미지 시퀀스를 위한 최적화된 만화 스토리텔링 시스템

• Weakly Supervised Learning of Object Segmentations from Web-Scale Video

• Smooth Nonnegative Matrix Factorization for Unsupervised Audiovisual Document Structuring

• Efficient Closed-Form Solution to Generalized Boundary Detection

• Spatiotemporal Deformable Part Models for Action Detection

• Interactive Image Tagging을 위한 인간 라벨링 최적화

• 대규모 다중 라벨 전파를 위한 효율적인 희소 그래프 구성

• 언어 독립적 시간 표현 판별적 파싱 (Language-Independent Discriminative Parsing of Temporal Expressions)

• Transfer Joint Embedding for Cross-Domain NER

• 화자 추적 기반 영상 자막 배치 (Speaker-Following Video Subtitles)

• 이미지 주석 및 검색을 위한 Feature-Word-Topic 모델

• YouTube 채널 분류를 위한 실용적 시스템

• Video Snippets

• Fast Near-Duplicate Image Detection Using Uniform Randomized Trees

• Recursive Sparse Spatiotemporal Coding

• 음성 피드백 고려)

• Efficient Inference and Structured Learning for Semantic Role Labeling

• 다중 사용자 생성 영상 기반 미적 가이드 요약 (Aesthetics-Guided Summarization)

• Transfer Learning In MIR: Sharing Learned Latent Representations For Music Audio Classification And Similarity

• Point Representation for Local Optimization: Towards Multi-Dimensional Gray Codes

• 훈련 레이블 정제를 통한 텍스트 분류 정확도 향상

• Regularized Latent Semantic Indexing (RLSI): 대규모 토픽 모델링을 위한 새로운 접근법

• Neighborhood Preserving Codes for Assigning Point Labels: Applications to Stochastic Search

• Patch-Based Image Warping for Content-Aware Retargeting

• All Smiles: 얼굴 표정 분석을 통한 자동 사진 보정

• Latent Mixture of Discriminative Experts (LMDE)

• Image Annotation in Presence of Noisy Labels

• Fast, Accurate Detection of 100,000 Object Classes on a Single Machine (Technical Supplement)

• TRECVID 기반 콘텐츠 기반 비디오 복사 탐지 벤치마킹

• Similarity-based Clustering by Left-Stochastic Matrix Factorization

• 멀티미디어 마이크로블로그의 단어-이미지 연관성 모델링

• Cross-Domain Multi-Event Tracking via CO-PMHT

• Social Event Classification via Boosted Multimodal Supervised Latent Dirichlet Allocation

• 비디오 스트림에서 음향 및 시각적 단서를 이용한 광고 탐지

• Efficient Estimation of Word Representations in Vector Space

• Continuous Birdsong Recognition Using Gaussian Mixture Modeling of Image Shape Features

• 대규모 그래프 및 라벨 세트에서의 효율적이고 정확한 라벨 전파

• 다중 Kinect 기반 실시간 3D 재구성

• 움직이며 소리를 내는 객체의 식별 및 분할을 위한 다중모달 분석

• 음악 플레이리스트 자동 생성: 서베이 및 실험

• Active Learning through Adaptive Heterogeneous Ensembling (AHE)

• Near-duplicate video retrieval: Current research and future trends

• MOWL: 웹 기반 멀티미디어 애플리케이션을 위한 온톨로지 표현 언어

• Reversible Data Hiding With Optimal Value Transfer

• TPCKT: Two-Level Progressive Cross-Media Knowledge Transfer

• 대규모 저장소에서의 효율적인 비디오 스트림 모니터링 및 유사 중복 탐지

• Semantic contextual advertising based on the open directory project

• Semantic content-based recommendation of software services using context

• YouTube 영화 리뷰의 오디오-비주얼 맥락 기반 감정 분석

• YouTube 영상 음향 분석을 통한 유망 음악가 자동 발견

• Feature Ensemble Plus Sample Selection: Domain Adaptation for Sentiment Classification

• 실시간 트윗 검색을 위한 블룸 필터 체인(Bloom Filter Chains) 기반 후보 생성

• Understanding Indoor Scenes using 3D Geometric Phrases

• Rolling Up Random Variables in Data Cubes

• PRIME: 단입자 Cryo-EM을 위한 확률적 초기 3D 모델 생성

• Incremental Text Indexing for Fast Disk-Based Search

• 지오태그 이미지로부터 장면 위치 식별 (Identification of scene locations from geotagged images)

• 오디오의 역할

• CPCDN: Context 및 User Intelligence 기반 콘텐츠 전달

• 개인 사진 컬렉션에서의 공동 노이즈 레벨 추정

• vlHMM 기반 컨텍스트 인식 검색

• Video Resumer: YouTube 시청 위치 기억 확장 프로그램

• Multiprotocol Label Switching (MPLS)

• Data Enriched Linear Regression

• 대용량 텍스트 컬렉션에서의 효율적 퍼지 검색

• 실내 장면의 의미적 및 기하학적 상호작용 학습을 위한 판별 모델

• 웹 데이터베이스 검색 결과 자동 주석 처리 (Automatic Annotation of Web Database Search Results)

• 적응형 온톨로지 규칙을 이용한 보상-처벌 기반 개념 탐지

• iVector-based Acoustic Data Selection

• 인터넷 TV를 위한 콘텐츠 및 사회적 관련성 기반 개인화 광고 추천