다중 카테고리 크라우드소싱: 작업 난이도, 작업자 숙련도 및 의도 고려
Source
Evernote/Inbox/Multicategory Crowdsourcing Accounting for Variable Task Difficulty, Worker Skill, and Worker Intention.md
Summary
본 문서는 다중 카테고리 크라우드소싱 환경에서 작업자의 응답을 집계하여 정답을 추론하는 두 가지 접근법(확률적 모델링 및 결정론적 목적 함수 기반)을 제시합니다. 기존 방법과 달리 작업자의 숙련도(skill), 의도(intention), 그리고 작업의 난이도(difficulty) 간의 상호작용을 명시적으로 모델링합니다. 특히 숙련된 소수 작업자가 존재하지만 다수가 비숙련 또는 악의적인 경우(‘대중의 폭政’)에서도 효과적으로 정답을 추론할 수 있음을 실험적으로 입증했습니다. 비지도 및 반지도 학습 환경, 그리고 다양한 도메인이 혼합된 이질적 작업 배치에도 적용 가능합니다.
Key Points
- 다중 카테고리 크라우드소싱 응답 집계를 위한 확률적 모델링 및 결정론적 목적 함수 기반 접근법 제안
- 작업자 숙련도, 의도, 작업 난이도의 상호작용을 명시적으로 모델링하여 다양한 작업자 유형 포착
- 비지도/반지도 학습 환경 및 다중 도메인(이질적) 작업 배치에 적용 가능
- 비숙련 또는 악의적인 다수 작업자 속에서 소수의 숙련된 작업자를 효과적으로 활용하여 ‘대중의 폭政’ 극복
Related
-
Similarity-based Clustering by Left-Stochastic Matrix Factorization
-
A Prediction-Based User Selection Framework for Heterogeneous Mobile CrowdSensing
-
Cloud Pricing Models Taxonomy, Survey, and Interdisciplinary Challenges
-
Multi-Armed Recommendation Bandits for Selecting State Machine Policies for Robotic Systems
-
Backward Path Growth for Efficient Mobile Sequential Recommendation
-
A systematic approach to classify design-time global scheduling techniques
-
Truthful Mobile Crowdsensing for Strategic Users With Private Data Quality
-
Developing Parallel Control and Management for Urban Traffic Systems
-
Eureka: Edge-Based Discovery of Training Data for Machine Learning
-
Is the Price of Anarchy the Right Measure for Load-Balancing Games
-
Adaptive Speculative Processing of Out-of-Order Event Streams
-
Scheduling in a Random Environment: Stability and Asymptotic Optimality