Interactive Image Tagging을 위한 인간 라벨링 최적화

Source

• Evernote/IFTTT Feedly/Towards optimizing human labeling for interactive image tagging.md

Summary

본 논문은 이미지 태그링에서 인간과 컴퓨터의 협업을 통한 ‘인터랙티브 태그링’의 효율성을 높이는 프레임워크를 제안합니다. 기존 연구가 샘플 선택이나 예측 모델에 집중했다면, 본 연구는 인간의 라벨링 노력을 더 효과적으로 활용하여 동일한 성능을 더 적은 비용으로 달성하거나, 동일한 비용으로 더 나은 성능을 얻는 데 중점을 둡니다.

Key Points

• 인터랙티브 태그링: 자동 태그링의 부정확성과 수동 태그링의 높은 비용 문제를 해결하기 위한 반자동 방식.
• 연구 목적: 기존 샘플 선택/모델 중심 접근에서 벗어나, 인간의 라벨링 노력(Human Labeling Effort) 최적화에 초점.
• 제안 프레임워크: 지정된 라벨링 비용 내에서 최대 성능 달성 또는 목표 성능을 최소 비용으로 달성하는 효율성 극대화.
• 저자: Jinhui Tang, Qiang Chen, Meng Wang, Shuicheng Yan, Tat-Seng Chua, Ramesh Jain
• 출처: ACM Transactions on Multimedia Computing, Communications, and Applications (TOMCCAP), 2013

Related

• Social-Sensed Image Search

• Patch-Based Image Warping for Content-Aware Retargeting

• Model-Driven Optimization of Opportunistic Routing

• 이미지 기반 추천 시스템에서의 정서적 라벨링 (Affective Labeling)

• Cross-Media Tag Transfer (CMTT): 이미지에서 비디오로 태그 지식 이전

• Eureka: Edge-Based Discovery of Training Data for Machine Learning

• 인간 행동 인식용 온톨로지 조사

• 대규모 그래프 및 라벨 세트에서의 효율적이고 정확한 라벨 전파

• 인터넷 TV를 위한 콘텐츠 및 사회적 관련성 기반 개인화 광고 추천

• Image Annotation in Presence of Noisy Labels

• 대규모 다중 라벨 전파를 위한 효율적인 희소 그래프 구성

• 감정 콘텐츠 기반 적응형 스트리밍 최적화 (ACAA)

• Discriminative Segment Annotation in Weakly Labeled Video

• 이미지 주석 및 검색을 위한 Feature-Word-Topic 모델

• YouTube 채널 분류를 위한 실용적 시스템

• 시간적 이미지 시퀀스를 위한 최적화된 만화 스토리텔링 시스템

• 훈련 레이블 정제를 통한 텍스트 분류 정확도 향상

• 디지털 이미지의 콘텐츠 무결성 보호 및 충실도 유지: 개선된 버전

• A Hamming Embedding Kernel with Informative Bag-of-Visual Words for Video Semantic Indexing

• K-RBMs를 이용한 다중 비선형 부분공간 학습

• Query-Adaptive Image Search With Hash Codes

• Efficient Closed-Form Solution to Generalized Boundary Detection

• Attribute-Augmented Semantic Hierarchy (A2SH) for CBIR

• Weakly Supervised Learning of Object Segmentations from Web-Scale Video

• Supervised Robust Discrete Multimodal Hashing (SRDMH)

• A Top-Down Approach for Video Summarization

• 3D 객체 검색을 위한 시맨틱 시그니처 학습

• Sparse Hashing (SH) for Fast Multimedia Search

• Smooth Nonnegative Matrix Factorization for Unsupervised Audiovisual Document Structuring

• 다중 특징 분석 및 시맨틱 컨텍스트 학습을 통한 이미지 분류

• Fast Near-Duplicate Image Detection Using Uniform Randomized Trees

• Transfer Joint Embedding for Cross-Domain NER

• 음성 피드백 고려)

• Cross-Domain Feature Learning in Multimedia

• Point Representation for Local Optimization: Towards Multi-Dimensional Gray Codes

• Transfer Learning In MIR: Sharing Learned Latent Representations For Music Audio Classification And Similarity

• 언어 독립적 시간 표현 판별적 파싱 (Language-Independent Discriminative Parsing of Temporal Expressions)

• Regularized Latent Semantic Indexing (RLSI): 대규모 토픽 모델링을 위한 새로운 접근법

• Fast, Accurate Detection of 100,000 Object Classes on a Single Machine (Technical Supplement)

• Neighborhood Preserving Codes for Assigning Point Labels: Applications to Stochastic Search

• All Smiles: 얼굴 표정 분석을 통한 자동 사진 보정

• 정보 기하학을 통한 순수 고차 단어 연관성 마이닝

• Feature Ensemble Plus Sample Selection: Domain Adaptation for Sentiment Classification

• Efficient Inference and Structured Learning for Semantic Role Labeling

• Continuous Birdsong Recognition Using Gaussian Mixture Modeling of Image Shape Features

• Active Learning through Adaptive Heterogeneous Ensembling (AHE)

• Universal Dependency Annotation for Multilingual Parsing

• 다중 모드 특징 표현 및 시간 피라미드 매칭을 통한 콘텐츠 기반 복제 탐지

• 위키백과 링크 의미소거를 위한 토픽 모델링

• Recursive Sparse Spatiotemporal Coding

• Script-to-Movie: 스크립트 기반 자동 영화 생성 프레임워크

• TPCKT: Two-Level Progressive Cross-Media Knowledge Transfer

• 화자 추적 기반 영상 자막 배치 (Speaker-Following Video Subtitles)

• Classifying with Confidence From Incomplete Test Data

• Structured Streaming Skeleton (SSS): 온라인 인간 제스처 인식용 새로운 특징 추출 방법

• 웹 데이터베이스 검색 결과 자동 주석 처리 (Automatic Annotation of Web Database Search Results)

• 실시간 트윗 검색을 위한 블룸 필터 체인(Bloom Filter Chains) 기반 후보 생성

• Spatiotemporal Deformable Part Models for Action Detection

• Video Snippets

• Reversible Data Hiding With Optimal Value Transfer

• Content vs. Context: Video Landmark Retrieval

• 대규모 희소 네트워크의 커뮤니티 검출을 위한 의사 가능도 방법

• 인간 동작 분석을 위한 특이값 분해(SVD) 기반 지식 획득 방법

• Latent Mixture of Discriminative Experts (LMDE)

• Cross-Domain Multi-Event Tracking via CO-PMHT

• 멀티미디어 마이크로블로그의 단어-이미지 연관성 모델링

• 트위터 다면적 토픽 모델링을 위한 사회적 및 보조 의미 통합

• Similarity Preserving Feature Selection (SPFS)

• When Amazon Meets Google: Product Visualization by Exploring Multiple Web Sources

• 다중 채널 오디오 압축을 위한 레이트-디스토션 최적화

• Meta-Learning 기반 Instance Selection을 위한 복잡도 측정 지표

• Incremental Text Indexing for Fast Disk-Based Search

• Pay by the Bit: 집단 인간 판단을 위한 정보 이론적 지표

• Multiprotocol Label Switching (MPLS)

• Data Enriched Linear Regression

• Similarity-based Clustering by Left-Stochastic Matrix Factorization