K-RBMs를 이용한 다중 비선형 부분공간 학습

Source

• Evernote/IFTTT Feedly/Learning Multiple Non-Linear Sub-Spaces using K-RBMs.md

Summary

이 논문은 자연 이미지 패치가 단일 분포가 아닌 다중 비선형 부분공간(non-linear subspaces)에 존재한다는 가설을 바탕으로, K-Restricted Boltzmann Machines(K-RBMs)을 사용하여 이러한 부분공간을 학습하는 프레임워크를 제안합니다. EM 알고리즘과 유사한 반복적 과정을 통해 입력 공간의 적절한 비선형 부분공간을 찾고 이미지 패치를 해당 공간에 연관시킴으로써 재구성 오차를 최소화합니다. 실험 결과, 이 프레임워크 기반의 표현은 SIFT 기반 Bag-of-Words 및 컨볼루션 심층 신념 네트워크(CDBN)보다 우수한 성능을 보였습니다.

Key Points

• 자연 이미지 데이터는 복잡한 분포를 가지며, 이미지 패치는 서로 다른 다중 비선형 부분공간에 위치한다고 가정
• K-Restricted Boltzmann Machines(K-RBMs)을 활용하여 원시 이미지 공간에서 다중 비선형 부분공간 학습
• EM 알고리즘과 유사한 반복적 최적화를 통해 부분공간 발견 및 패치 연관성 부여, 재구성 오차 최소화
• 기존 SIFT Bag-of-Words 및 컨볼루션 심층 신념 네트워크 대비 이미지 분류 데이터셋에서 우수한 성능 입증

Related

• 다중 특징 분석 및 시맨틱 컨텍스트 학습을 통한 이미지 분류

• Patch-Based Image Warping for Content-Aware Retargeting

• Efficient Estimation of Word Representations in Vector Space

• A Hamming Embedding Kernel with Informative Bag-of-Visual Words for Video Semantic Indexing

• Similarity Preserving Feature Selection (SPFS)

• Query-Adaptive Image Search With Hash Codes

• 양방향 연관 기억(BAM) 모델의 다양한 접근법

• 시간적 이미지 시퀀스를 위한 최적화된 만화 스토리텔링 시스템

• 3D 객체 검색을 위한 시맨틱 시그니처 학습

• 다중 Kinect 기반 실시간 3D 재구성

• Efficient Closed-Form Solution to Generalized Boundary Detection

• 대규모 다중 라벨 전파를 위한 효율적인 희소 그래프 구성

• A Top-Down Approach for Video Summarization

• Cross-Media Tag Transfer (CMTT): 이미지에서 비디오로 태그 지식 이전

• 다중 모드 특징 표현 및 시간 피라미드 매칭을 통한 콘텐츠 기반 복제 탐지

• Supervised Robust Discrete Multimodal Hashing (SRDMH)

• Attribute-Augmented Semantic Hierarchy (A2SH) for CBIR

• Cross-Domain Feature Learning in Multimedia

• Recursive Sparse Spatiotemporal Coding

• 음성 피드백 고려)

• Sparse Hashing (SH) for Fast Multimedia Search

• Smooth Nonnegative Matrix Factorization for Unsupervised Audiovisual Document Structuring

• Weakly Supervised Learning of Object Segmentations from Web-Scale Video

• Discriminative Segment Annotation in Weakly Labeled Video

• Interactive Image Tagging을 위한 인간 라벨링 최적화

• 언어 독립적 시간 표현 판별적 파싱 (Language-Independent Discriminative Parsing of Temporal Expressions)

• Script-to-Movie: 스크립트 기반 자동 영화 생성 프레임워크

• Transfer Joint Embedding for Cross-Domain NER

• Point Representation for Local Optimization: Towards Multi-Dimensional Gray Codes

• 정보 기하학을 통한 순수 고차 단어 연관성 마이닝

• 이미지 주석 및 검색을 위한 Feature-Word-Topic 모델

• Transfer Learning In MIR: Sharing Learned Latent Representations For Music Audio Classification And Similarity

• Fast Near-Duplicate Image Detection Using Uniform Randomized Trees

• YouTube 채널 분류를 위한 실용적 시스템

• Spatiotemporal Deformable Part Models for Action Detection

• 화자 추적 기반 영상 자막 배치 (Speaker-Following Video Subtitles)

• Neighborhood Preserving Codes for Assigning Point Labels: Applications to Stochastic Search

• Efficient Inference and Structured Learning for Semantic Role Labeling

• Continuous Birdsong Recognition Using Gaussian Mixture Modeling of Image Shape Features

• Fast, Accurate Detection of 100,000 Object Classes on a Single Machine (Technical Supplement)

• 대규모 그래프 및 라벨 세트에서의 효율적이고 정확한 라벨 전파

• Active Learning through Adaptive Heterogeneous Ensembling (AHE)

• Image Annotation in Presence of Noisy Labels

• Latent Mixture of Discriminative Experts (LMDE)

• Content vs. Context: Video Landmark Retrieval

• All Smiles: 얼굴 표정 분석을 통한 자동 사진 보정

• Feature Ensemble Plus Sample Selection: Domain Adaptation for Sentiment Classification

• TPCKT: Two-Level Progressive Cross-Media Knowledge Transfer

• Video Snippets

• 다중 사용자 생성 영상 기반 미적 가이드 요약 (Aesthetics-Guided Summarization)

• Similarity-based Clustering by Left-Stochastic Matrix Factorization

• Cross-Domain Multi-Event Tracking via CO-PMHT

• 심층 신경망을 이용한 통계적 파라미터 음성 합성

• Multiprotocol Label Switching (MPLS)

• 유전 알고리즘(GP)을 활용한 햅틱 기반 서명 인증

• Reversible Data Hiding With Optimal Value Transfer

• 훈련 레이블 정제를 통한 텍스트 분류 정확도 향상

• Data Enriched Linear Regression

• 이미지 기반 추천 시스템에서의 정서적 라벨링 (Affective Labeling)

• Structured Streaming Skeleton (SSS): 온라인 인간 제스처 인식용 새로운 특징 추출 방법

• Enlisting the Ghost: Modeling Empty Categories for Machine Translation

• 적응형 온톨로지 규칙을 이용한 보상-처벌 기반 개념 탐지

• Social Event Classification via Boosted Multimodal Supervised Latent Dirichlet Allocation

• Semantic Queries by Example

• 비디오 스트림에서 음향 및 시각적 단서를 이용한 광고 탐지

• 개인 사진 컬렉션에서의 공동 노이즈 레벨 추정

• Effective and Robust Query-Based Stemming

• DOM 구조 지식 기반 모델을 이용한 반구조화 웹 레코드 강건한 탐지

• 대규모 저장소에서의 효율적인 비디오 스트림 모니터링 및 유사 중복 탐지

• 멀티미디어 마이크로블로그의 단어-이미지 연관성 모델링