휴대용 기기를 위한 다중모드 손 및 발 제스처 상호작용

Source

• Evernote/Inbox/Multimodal Hand and Foot Gesture Interaction for Handheld Devices.md

Summary

본 논문은 휴대용 기기를 위한 손과 발을 결합한 다중모드 상호작용 방식을 제안합니다. 발 제스처는 CTD 및 TLD 알고리즘을 통해 감지 및 추적되며, 카메라의 수동 호모그래피 행렬을 이용해 3D 발 포즈를 추정합니다. 몰입감 강화를 위해 3D 입체 영상과 진동 촉각 피드백을 활용하며, 개념 증명(PoC)으로 다중모드 축구 게임을 개발하고 사용자 연구를 통해 만족도를 검증했습니다.

Key Points

• 손과 발 제스처를 결합한 휴대용 기기 상호작용 방식 제안
• 발 제스처 감지/추적: CTD 및 TLD 알고리즘 사용
• 3D 발 포즈 추정: 카메라의 수동 호모그래피 행렬 기반
• 몰입감 증진: 3D 입체 영상 및 진동 촉각(vibrotactile) 피드백 적용
• 개념 증명: 다중모드 축구 게임 개발 및 사용자 만족도 검증

Related

• 양손 제스처 키보드 (Bimanual Gesture Keyboard)

• 다중모드 HCI에서 무의식적 사용자 신호 활용

• 모바일 햅틱 전자책 시스템: 3D 몰입형 독서를 위한 연구

• 진동 촉각 코드를 통한 동사 구 전달 연구

• 다중 Kinect 기반 실시간 3D 재구성

• 멀티미디어 애플리케이션에서 햅틱-비디오 및 햅틱-오디오 편차에 대한 인간의 지각 연구

• 초음파를 이용한 가시적·촉각적 3D 햅틱 기술

• 구글, 압력제어 방식 스마트폰 특허 출원

• 자발적 기기 연동을 위한 사용자 상호작용 조사

• 분산 및 효율적인 객체 탐지를 위한 디바이스, 엣지, 클라우드 간 상호작용

• TV 화면의 모든 것을 만질 수 있는 햅틱 피드백 시스템

• 분산 상호작용 애플리케이션을 위한 클라이언트 할당 최적화

• 인간-기계 인터페이스(HMI)에서의 청각적 표현 개요

• PlayStation 3 Head Movement Control

• RSS 기반 비장치 위치추적(DFLT)을 위한 지수-레이리 모델

• 멀티미디어(QoE)의 사용자 경험 연구

• Learning to Communicate (OpenAI)

• 햅틱 가상 환경의 사용자 경험(QoE) 모델

• CDN 부하 분산을 위한 분산 제어 법칙

• TouchKeys: 키보드 건반별 멀티터치 제어

• UI의 미래: 뇌-컴퓨터 인터페이스(BCI)

• 가상 환경에서의 자기중심적 거리 지각에 대한 리뷰

• Experiential Media Systems (경험적 미디어 시스템)

• TV 사용자 경험(UX)을 위한 HCI 연구 워크숍

• UCSF 연구: 멀티태스킹 게임이 노인의 인지 기능을 젊게 한다

• 멀티미디어 시스템 연구: 지난 20 년과 향후 20 년을 위한 교훈

• Mulsemedia: 현황, 관점 및 과제

• 일본 NHK의 8K TV 시연: 초현실적 화질

• 실내 장면의 의미적 및 기하학적 상호작용 학습을 위한 판별 모델

• 실제 환경에서 인간 군중으로 확장되는 센싱 기반 시스템 연구

• 다중 향기 증강 멀티미디어 동기화 연구

• 인간공학적 시청 환경 분석 (VentureSquare)

• 미드 Almost Human으로 엿보는 미래 기술

• 몰입형 통신의 진화: 전화, 텔레비전, 그리고 텔레포트

• 사용자 인터페이스에서 초보자에서 전문가로의 전환 지원

• 시간적 멀티미디어 동기화 원칙의 진화: 역사적 관점

• 사회적 맥락 인식 멀티미디어 저작: 과거, 현재, 미래

• 송호준 미디어 작가: 개인 인공위성 발사 및 ‘실력 있는 백수’론

• 다중미디어의 향후 10 년 전망 및 성공 사례

• ADAMS: QoE 기반 멀티센서리 미디어 전송 프레임워크

• 기타 연주를 통한 이메일 입력 시스템

• 이공계적 사고로 분유통 이물질(개구리) 탐지 방법 고찰

• 온라인 비디오 전달: 과거, 현재, 미래

• UX 관리의 현재 및 미래 트렌드 (패널 세션 요약)

• 다중 사용자 및 헬퍼가 있는 무선 네트워크를 위한 적응형 비디오 스트리밍

• 호기심: 심리학에서 계산 모델로

• D2D 통신을 위한 결합 모드 선택 및 자원 할당

• 다중 채널 오디오 압축을 위한 레이트-디스토션 최적화

• 이미지 검색의 20 년간 진화: 수천 개에서 수십억 개 데이터셋으로

• 무선 네트워크 가상화를 위한 확률 게임 프레임워크

• CLARITY: 뇌 조직 투명화 기술

• IoT 실시간 애플리케이션을 위한 QoS 및 강건성 기반 자원 프로비저닝

• 다중 사용자 통신 네트워크를 위한 조정된 다중 팔 슬롯머신 접근법

• 3D 객체 검색을 위한 시맨틱 시그니처 학습

• 인터넷 비디오 스트리밍 20년: 회고적 관점

• 다중 네트워크 클라이언트를 위한 왜곡 인식 확장형 비디오 스트리밍

• 무선 네트워크의 이웃 발견을 위한 효율적 알고리즘

• DART: IoT를 위한 스펙트럼 인식 엣지 컴퓨팅 서비스 배치

• FireCol: DDoS 공격 탐지를 위한 협력적 보호 네트워크

• APRICOD: 접근 패턴 기반 분산 캐싱 미들웨어

• S2S 논문 전개 개요

• 뉴로모픽 컴퓨팅 개요

• 움직이며 소리를 내는 객체의 식별 및 분할을 위한 다중모달 분석

• 엣지 플랫폼을 위한 서비스 정의형 오케스트레이션 접근법

• YouTube 채널 분류를 위한 실용적 시스템

• P2P 환경에서의 분산 컴퓨팅을 위한 탈중앙화 자원 발견 메커니즘

• 도로 네트워크를 위한 무선 브로드캐스트 기반 공간 쿼리 인덱스 (Air Index)

• WLAN-셀룰러 음성 핸드오버 평가를 위한 분석적 프레임워크

• 분산 환경에서의 검색 확장성 및 클러스터링 역설 연구

• 대규모 MANET을 위한 DHT 기반 라우팅 서베이

• 스케치 기반 비디오 클립 상호작용 조직화 접근법

• PRIME: 단입자 Cryo-EM을 위한 확률적 초기 3D 모델 생성

• A survey on ear biometrics

• 스마트폰 기반 실시간 TV 채널 인식 기술 (IRTR)

• 소프트웨어 진화 법칙의 진화: 체계적 문헌 검토 기반 논의

• 분산 가상 환경의 관심사 관리(Iinterest Management)에 대한 서베이

• 분산 제약 만족 문제 (Decentralized CSP) 솔버

• 사회기술 시스템 프로그래밍을 위한 커밋먼트 기반 인프라

• 실내 이동 객체를 위한 거리 기반 조인 (Distance-Aware Join for Indoor Moving Objects)

• 대규모 모바일 크라우드 센싱을 위한 동적 참여자 선택

• Agentive Tools 및 SAUNa 기술: 다음 인터페이스의 방향

• 꿈을 기록하는 기술의 가능성

• 감정 콘텐츠 기반 적응형 스트리밍 최적화 (ACAA)

• 확산형 실내 광무선 통신 링크의 심볼간 간섭 완화를 위한 분류기 비교 연구