TPCKT: Two-Level Progressive Cross-Media Knowledge Transfer

Source

• Evernote/Inbox/TPCKT Two-Level Progressive Cross-Media Knowledge Transfer.md

Summary

본 논문은 크로스미디어 검색(Cross-media retrieval)의 정확도를 높이기 위해 대규모 크로스미디어 데이터에서 소규모 타겟 도메인으로 지식을 이전하는 ‘TPCKT’ 방법을 제안합니다. 주요 특징은 다음과 같습니다: 1) 미디어별 수준과 미디어 공유 수준에서 도메인 판별기를 사용하는 ‘2단계 적대적 이전 아키텍처’를 통해 도메인 간 차이를 줄이고 일관성을 유지합니다. 2) 서로 다른 라벨 공간의 어려움을 해결하기 위해 의미적으로 관련된 카테고리를 점진적으로 선택하는 ‘점진적 의미 이전 메커니즘’을 도입합니다. PKU XMediaNet(소스)과 3개의 소규모 데이터셋(타겟)을 사용한 실험에서 검색 정확도 향상을 입증했습니다.

Key Points

• 크로스미디어 검색에서 라벨링 비용 절감을 위해 기존 데이터에서 새로운 도메인으로 지식 이전(Knowledge Transfer) 수행
• 2단계 적대적 이전 아키텍처: 미디어별 및 미디어 공유 수준의 도메인 판별기 사용으로 도메인 불일치 감소 및 크로스미디어 일관성 유지
• 점진적 의미 이전 메커니즘: 난이도가 상승하는 순서로 의미적으로 관련된 카테고리 선택하여 라벨 공간 차이 해결 및 이전 강건성 확보
• 실험: PKU XMediaNet(대규모 소스 도메인)에서 3개 소규모 타겟 도메인으로 지식 이전 시 검색 정확도 향상 확인

Related

• Cross-Media Tag Transfer (CMTT): 이미지에서 비디오로 태그 지식 이전

• Transfer Joint Embedding for Cross-Domain NER

• Transfer Learning In MIR: Sharing Learned Latent Representations For Music Audio Classification And Similarity

• vlHMM 기반 컨텍스트 인식 검색

• Source-Side Classifier Preordering for Machine Translation

• Cross-Domain Multi-Event Tracking via CO-PMHT

• CPCDN: Context 및 User Intelligence 기반 콘텐츠 전달

• Token and Type Constraints for Cross-Lingual Part-of-Speech Tagging

• Feature Ensemble Plus Sample Selection: Domain Adaptation for Sentiment Classification

• Social Event Classification via Boosted Multimodal Supervised Latent Dirichlet Allocation

• Improved Domain Adaptation for Statistical Machine Translation

• Multiprotocol Label Switching (MPLS)

• Cross-Domain Feature Learning in Multimedia

• Active Learning through Adaptive Heterogeneous Ensembling (AHE)

• Enlisting the Ghost: Modeling Empty Categories for Machine Translation

• Latent Mixture of Discriminative Experts (LMDE)

• 마이크로블로그 스트림의 소셜 이벤트 멀티미디어 요약

• Unsupervised Spatial Event Detection in Targeted Domains with Applications to Civil Unrest Modeling

• 대규모 그래프 및 라벨 세트에서의 효율적이고 정확한 라벨 전파

• Supervised Robust Discrete Multimodal Hashing (SRDMH)

• An Unsupervised Feature Selection Framework for Social Media Data

• Target Language Adaptation of Discriminative Transfer Parsers

• Efficient Time-Stamped Event Sequence Anonymization

• 음성 피드백 고려)

• Discriminative Segment Annotation in Weakly Labeled Video

• Image Annotation in Presence of Noisy Labels

• 대규모 다중 라벨 전파를 위한 효율적인 희소 그래프 구성

• 심층 신경망을 이용한 통계적 파라미터 음성 합성

• 다중 특징 분석 및 시맨틱 컨텍스트 학습을 통한 이미지 분류

• K-RBMs를 이용한 다중 비선형 부분공간 학습

• 멀티미디어 마이크로블로그의 단어-이미지 연관성 모델링

• 이미지 주석 및 검색을 위한 Feature-Word-Topic 모델

• 시간적 이미지 시퀀스를 위한 최적화된 만화 스토리텔링 시스템

• Interactive Image Tagging을 위한 인간 라벨링 최적화

• Weakly Supervised Learning of Object Segmentations from Web-Scale Video

• Query-Adaptive Image Search With Hash Codes

• Similarity Preserving Feature Selection (SPFS)

• YouTube 채널 분류를 위한 실용적 시스템

• 예측 모델링에 대한 실용서

• A Top-Down Approach for Video Summarization

• Sparse Hashing (SH) for Fast Multimedia Search

• A Hamming Embedding Kernel with Informative Bag-of-Visual Words for Video Semantic Indexing

• 심층 피처 합성 (Deep Feature Synthesis) 개요

• Protecting Sensitive Labels in Social Network Data Anonymization

• 이미지 기반 추천 시스템에서의 정서적 라벨링 (Affective Labeling)

• Attribute-Augmented Semantic Hierarchy (A2SH) for CBIR

• Smooth Nonnegative Matrix Factorization for Unsupervised Audiovisual Document Structuring

• Language Modeling Capitalization

• Efficient Closed-Form Solution to Generalized Boundary Detection

• Universal Dependency Annotation for Multilingual Parsing

• Social Machine Politics Are Here to Stay

• Reversible Data Hiding With Optimal Value Transfer

• Efficient Inference and Structured Learning for Semantic Role Labeling

• Classifying with Confidence From Incomplete Test Data

• Moment-Based Spectral Analysis of Large-Scale Networks Using Local Structural Information

• Efficient Estimation of Word Representations in Vector Space

• 훈련 레이블 정제를 통한 텍스트 분류 정확도 향상

• 소셜 미디어 데이터를 활용한 위키백과 문서 지리참조

• 대형 및 느슨한 커뮤니티의 압축 (Compacting Large and Loose Communities)