Transfer Joint Embedding for Cross-Domain NER

Source

• Evernote/Inbox/Transfer joint embedding for cross-domain named entity recognition.md

Summary

이 논문은 도메인 간 Named Entity Recognition(NER) 성능 향상을 위해 ‘Transfer Joint Embedding(TJE)’ 방법을 제안합니다. 기존 전이 학습(Transfer Learning) 접근법들이 NER을 이진 분류 문제로 단순화하는 한계가 있었으나, TJE는 NER의 다중 클래스 분류 특성을 유지하며 클래스 간 관계를 활용하고 도메인 간 데이터 분포 차이를 줄입니다.

Key Points

• 기존 ML 기반 NER 시스템은 특정 도메인(예: 뉴스)에 최적화되어 다른 도메인(예: 웹로그)으로의 적응력이 낮음.
• 기존 NER 전이 학습 연구는 주로 이진 분류에 집중하여, 다중 클래스 문제인 NER을 여러 이진 문제로 분할해 해결해야 하는 비효율성 존재.
• 제안된 TJE(Transfer Joint Embedding)는 도메인 간 다중 클래스 분류를 위한 새로운 전이 학습 방법.
• TJE는 클래스(라벨) 간의 관계를 완전히 활용하고, 전이 학습을 위한 도메인 간 데이터 분포 차이를 감소시킴.

Related

• Transfer Learning In MIR: Sharing Learned Latent Representations For Music Audio Classification And Similarity

• TPCKT: Two-Level Progressive Cross-Media Knowledge Transfer

• Feature Ensemble Plus Sample Selection: Domain Adaptation for Sentiment Classification

• 금융 데이터 모델 교차 검증을 위한 점근적 메타러닝 (Asymptotic Meta Learning)

• NEAT: 도로 네트워크 기반 트래젝토리 클러스터링

• Cross-Media Tag Transfer (CMTT): 이미지에서 비디오로 태그 지식 이전

• Improved Domain Adaptation for Statistical Machine Translation

• 지연 민감형 애플리케이션을 위한 다중 사용자 모바일 컴퓨팅 오프로딩 및 전송 스케줄링 메커니즘

• Label Partitioning for Sublinear Ranking

• Cross-Domain Feature Learning in Multimedia

• Cross-Domain Multi-Event Tracking via CO-PMHT

• A Hamming Embedding Kernel with Informative Bag-of-Visual Words for Video Semantic Indexing

• Active Learning through Adaptive Heterogeneous Ensembling (AHE)

• 위키백과 반달리즘 탐지를 위한 크로스-러닝 (봇 vs 사용자)

• Multiprotocol Label Switching (MPLS)

• Social Event Classification via Boosted Multimodal Supervised Latent Dirichlet Allocation

• Attribute-Augmented Semantic Hierarchy (A2SH) for CBIR

• Latent Mixture of Discriminative Experts (LMDE)

• K-RBMs를 이용한 다중 비선형 부분공간 학습

• Affinity Weighted Embedding

• 다중 특징 분석 및 시맨틱 컨텍스트 학습을 통한 이미지 분류

• Supervised Robust Discrete Multimodal Hashing (SRDMH)

• Discriminative Segment Annotation in Weakly Labeled Video

• 대규모 그래프 및 라벨 세트에서의 효율적이고 정확한 라벨 전파

• Enlisting the Ghost: Modeling Empty Categories for Machine Translation

• Weakly Supervised Learning of Object Segmentations from Web-Scale Video

• 음성 피드백 고려)

• A Top-Down Approach for Video Summarization

• 시간적 이미지 시퀀스를 위한 최적화된 만화 스토리텔링 시스템

• Efficient Closed-Form Solution to Generalized Boundary Detection

• 대규모 다중 라벨 전파를 위한 효율적인 희소 그래프 구성

• Smooth Nonnegative Matrix Factorization for Unsupervised Audiovisual Document Structuring

• Sparse Hashing (SH) for Fast Multimedia Search

• Query-Adaptive Image Search With Hash Codes

• Interactive Image Tagging을 위한 인간 라벨링 최적화

• 이미지 주석 및 검색을 위한 Feature-Word-Topic 모델

• YouTube 채널 분류를 위한 실용적 시스템

• 3D 객체 검색을 위한 시맨틱 시그니처 학습

• 언어 독립적 시간 표현 판별적 파싱 (Language-Independent Discriminative Parsing of Temporal Expressions)

• An Unsupervised Feature Selection Framework for Social Media Data

• 예측 모델링에 대한 실용서

• Image Annotation in Presence of Noisy Labels

• Fast Near-Duplicate Image Detection Using Uniform Randomized Trees

• Efficient Inference and Structured Learning for Semantic Role Labeling

• 정보 기하학을 통한 순수 고차 단어 연관성 마이닝

• Reversible Data Hiding With Optimal Value Transfer

• 다중 모드 특징 표현 및 시간 피라미드 매칭을 통한 콘텐츠 기반 복제 탐지

• Spatiotemporal Deformable Part Models for Action Detection

• Script-to-Movie: 스크립트 기반 자동 영화 생성 프레임워크

• Neighborhood Preserving Codes for Assigning Point Labels: Applications to Stochastic Search

• Fast, Accurate Detection of 100,000 Object Classes on a Single Machine (Technical Supplement)

• 화자 추적 기반 영상 자막 배치 (Speaker-Following Video Subtitles)

• 멀티미디어 마이크로블로그의 단어-이미지 연관성 모델링

• Efficient Estimation of Word Representations in Vector Space

• Point Representation for Local Optimization: Towards Multi-Dimensional Gray Codes

• Target Language Adaptation of Discriminative Transfer Parsers

• 자동화에 대한 신뢰 (Trust in Automation)

• Similarity Preserving Feature Selection (SPFS)

• CNY 환율 예측

• 심층 신경망을 이용한 통계적 파라미터 음성 합성

• Content vs. Context: Video Landmark Retrieval

• Patch-Based Image Warping for Content-Aware Retargeting

• Continuous Birdsong Recognition Using Gaussian Mixture Modeling of Image Shape Features

• Video Snippets

• Language Modeling Capitalization

• 훈련 레이블 정제를 통한 텍스트 분류 정확도 향상

• 이미지 기반 추천 시스템에서의 정서적 라벨링 (Affective Labeling)

• 심층 피처 합성 (Deep Feature Synthesis) 개요

• Recursive Sparse Spatiotemporal Coding

• Deep Learning via Semi-Supervised Embedding

• 위키백과 링크 의미소거를 위한 토픽 모델링

• Unsupervised Spatial Event Detection in Targeted Domains with Applications to Civil Unrest Modeling

• Meta-Learning 기반 Instance Selection을 위한 복잡도 측정 지표