AncomWiki

마이크로블로그 스트림의 소셜 이벤트 멀티미디어 요약

Properties1
description본 논문은 텍스트 중심이 아닌, 텍스트·이미지·비디오 등 다중 미디어를 포함하는 마이크로블로그 스트림에서 소셜 이벤트의 시각적 요약을 자동 생성하는 프레임워크를 제안합니다. 주요 구성은 1) 스펙트럼 필터링을 통한 노이즈 이미지 제거, 2) Cross-Media-LDA(CMLDA) 모델을 활용한 교차 미디어 간 상관관계 기반 서브이벤트 발견, 3) 발견된 서브이벤트 지식을 바탕으로 대표 텍스트 및 시각적 샘플을 선별하여 통합…

12 min read

마이크로블로그 스트림의 소셜 이벤트 멀티미디어 요약

Source

  • Evernote/Inbox/Multimedia Summarization for Social Events in Microblog Stream.md

Summary

본 논문은 텍스트 중심이 아닌, 텍스트·이미지·비디오 등 다중 미디어를 포함하는 마이크로블로그 스트림에서 소셜 이벤트의 시각적 요약을 자동 생성하는 프레임워크를 제안합니다. 주요 구성은 1) 스펙트럼 필터링을 통한 노이즈 이미지 제거, 2) Cross-Media-LDA(CMLDA) 모델을 활용한 교차 미디어 간 상관관계 기반 서브이벤트 발견, 3) 발견된 서브이벤트 지식을 바탕으로 대표 텍스트 및 시각적 샘플을 선별하여 통합 시각적 요약 생성입니다. 실제 마이크로블로그 데이터셋을 통한 실험에서 기존 최첨단 접근법 대비 우수성을 입증했습니다.

Key Points

  • 기존 텍스트 기반 요약의 한계를 넘어 다중 미디어(텍스트, 이미지, 비디오)를 통합한 시각적 요약 프레임워크 제안
  • 스펙트럼 필터링 모델을 사용하여 이벤트 관련성이 낮은 노이즈 이미지 제거
  • Cross-Media-LDA(CMLDA) 모델을 통해 서로 다른 미디어 유형 간의 내재적 상관관계를 활용하여 서브이벤트 공동 발견
  • 발견된 서브이벤트 지식을 기반으로 대표 텍스트와 시각적 샘플을 선별·집계하여 전체적인 시각적 요약 생성
  • 실제 마이크로블로그 데이터셋 2 개를 사용한 실험을 통해 기존 방법 대비 성능 우수성 검증

그래프 뷰

백링크