Supervised Robust Discrete Multimodal Hashing (SRDMH)

Source

• Evernote/Inbox/Supervised Robust Discrete Multimodal Hashing for Cross-Media Retrieval.md

Summary

본 논문은 교차 미디어 검색을 위한 새로운 지도 기반 해싱 방법인 SRDMH(Supervised Robust Discrete Multimodal Hashing)를 제안합니다. 기존 방법들이 단순 유사도 행렬 사용으로 정보 손실을 초래하거나, 이진 제약 완화로 인한 양자화 오류를 발생시키는 문제를 해결하기 위해, SRDMH는 전체 레이블 정보를 해싱 함수 학습에 통합하여 원래 공간의 유사도를 보존합니다. 또한 이진 제약 완화를 피하고 이진 코드와 해싱 함수를 동시에 학습하며, 비선형 커널 임베딩을 가진 유연한 손실 함수와 중간 표현을 도입하여 강건성을 높이고 반복 알고리즘으로 쉽게 해결할 수 있게 합니다. 세 가지 벤치마크 데이터셋에 대한 실험 결과, SRDMH는 7 가지 최신 교차 모드 해싱 방법보다 우수한 성능을 보였으며, 분류 작업에서도 더 나은 결과를 얻었습니다.

Key Points

• 교차 미디어 검색을 위한 지도 기반 해싱 방법 SRDMH 제안
• 전체 레이블 정보 통합으로 원래 공간의 유사도 보존
• 이진 제약 완화 없이 이진 코드와 해싱 함수 동시 학습
• 비선형 커널 임베딩과 중간 표현 도입으로 강건성 향상
• 7 가지 최신 방법 대비 우수한 검색 및 분류 성능 입증

Related

• Sparse Hashing (SH) for Fast Multimedia Search

• 대규모 다중 라벨 전파를 위한 효율적인 희소 그래프 구성

• 다중 모드 특징 표현 및 시간 피라미드 매칭을 통한 콘텐츠 기반 복제 탐지

• Attribute-Augmented Semantic Hierarchy (A2SH) for CBIR

• Query-Adaptive Image Search With Hash Codes

• P2P 기반 시장 유도형 분산 라우팅 메커니즘 (MDR)

• Reversible Data Hiding With Optimal Value Transfer

• Intralayer Network Coding 기반 다중 속도 멀티캐스팅

• Effective and Robust Query-Based Stemming

• 3D 객체 검색을 위한 시맨틱 시그니처 학습

• A Hamming Embedding Kernel with Informative Bag-of-Visual Words for Video Semantic Indexing

• Social Event Classification via Boosted Multimodal Supervised Latent Dirichlet Allocation

• Content vs. Context: Video Landmark Retrieval

• 다중 특징 분석 및 시맨틱 컨텍스트 학습을 통한 이미지 분류

• Efficient Estimation of Word Representations in Vector Space

• K-RBMs를 이용한 다중 비선형 부분공간 학습

• Efficient Closed-Form Solution to Generalized Boundary Detection

• Cross-Media Tag Transfer (CMTT): 이미지에서 비디오로 태그 지식 이전

• Cross-Domain Feature Learning in Multimedia

• 언어 독립적 시간 표현 판별적 파싱 (Language-Independent Discriminative Parsing of Temporal Expressions)

• A Top-Down Approach for Video Summarization

• Weakly Supervised Learning of Object Segmentations from Web-Scale Video

• Smooth Nonnegative Matrix Factorization for Unsupervised Audiovisual Document Structuring

• 시간적 이미지 시퀀스를 위한 최적화된 만화 스토리텔링 시스템

• Transfer Joint Embedding for Cross-Domain NER

• Discriminative Segment Annotation in Weakly Labeled Video

• Interactive Image Tagging을 위한 인간 라벨링 최적화

• Efficient Inference and Structured Learning for Semantic Role Labeling

• Transfer Learning In MIR: Sharing Learned Latent Representations For Music Audio Classification And Similarity

• Latent Mixture of Discriminative Experts (LMDE)

• 정보 기하학을 통한 순수 고차 단어 연관성 마이닝

• Similarity-based Clustering by Left-Stochastic Matrix Factorization

• 음성 피드백 고려)

• Spatiotemporal Deformable Part Models for Action Detection

• Recursive Sparse Spatiotemporal Coding

• Fast Near-Duplicate Image Detection Using Uniform Randomized Trees

• Script-to-Movie: 스크립트 기반 자동 영화 생성 프레임워크

• Active Learning through Adaptive Heterogeneous Ensembling (AHE)

• Neighborhood Preserving Codes for Assigning Point Labels: Applications to Stochastic Search

• 이미지 주석 및 검색을 위한 Feature-Word-Topic 모델

• Point Representation for Local Optimization: Towards Multi-Dimensional Gray Codes

• TPCKT: Two-Level Progressive Cross-Media Knowledge Transfer

• Continuous Birdsong Recognition Using Gaussian Mixture Modeling of Image Shape Features

• 화자 추적 기반 영상 자막 배치 (Speaker-Following Video Subtitles)

• Image Annotation in Presence of Noisy Labels

• Semantic Queries by Example

• 대규모 그래프 및 라벨 세트에서의 효율적이고 정확한 라벨 전파

• Feature Ensemble Plus Sample Selection: Domain Adaptation for Sentiment Classification

• Cross-Domain Multi-Event Tracking via CO-PMHT

• Patch-Based Image Warping for Content-Aware Retargeting

• Video Snippets

• YouTube 채널 분류를 위한 실용적 시스템

• Multiprotocol Label Switching (MPLS)

• Rolling Up Random Variables in Data Cubes

• 심층 신경망을 이용한 통계적 파라미터 음성 합성

• Enlisting the Ghost: Modeling Empty Categories for Machine Translation

• 대규모 저장소에서의 효율적인 비디오 스트림 모니터링 및 유사 중복 탐지

• Fast, Accurate Detection of 100,000 Object Classes on a Single Machine (Technical Supplement)

• Data Enriched Linear Regression

• Structured Streaming Skeleton (SSS): 온라인 인간 제스처 인식용 새로운 특징 추출 방법

• Incremental Text Indexing for Fast Disk-Based Search

• 대용량 텍스트 컬렉션에서의 효율적 퍼지 검색

• 다중 사용자 생성 영상 기반 미적 가이드 요약 (Aesthetics-Guided Summarization)

• Robust Module-Based Data Management

• 모바일 음성 검색을 위한 Google 쿼리 스트림의 언어 모델링 경험적 탐색

• 훈련 레이블 정제를 통한 텍스트 분류 정확도 향상

• Similarity Preserving Feature Selection (SPFS)

• 멀티미디어 마이크로블로그의 단어-이미지 연관성 모델링