공공장소 제스처 인터랙션은 보통 프레임 단위 인식 문제로 평가되지만, 실제 배포 환경에서 사용자가 체감하는 것은 의도한 동작이 안정적인 '인터랙션 이벤트'로 확정되는지 여부라는 점을 지적한 사례 연구다. 저자들은 관광지 키오스크 프로젝트의 엔지니어링 수리 기록 8건을 분석해 양손 인사, 한손 주먹 흔들기, 양손 잡기 제어, 지식그래프 노드 호버링 등 4개 과제에서 20건의 실패 사례를 추출했다. 이를 모델 출력 퇴화, 시간적 불일치, 기하 스케일 불안정, 좌표-렌더링 불일치, 런타임 생명주기 실패, 피드백 동기화·복구 실패의 6개 실패 유형으로 정리했다. 나아가 손 랜드마크 모델과 인터랙션 과제 사이에 이벤트 확정 런타임 추상화를 두는 설계를 제안하며, 새 인식 모델이나 정확도 향상은 주장하지 않는다고 명시했다.
- •프레임 단위 인식 성능과 실제 사용자 경험 사이의 간극을 'recognition-to-interaction gap'으로 명명했다.
- •관광지 키오스크 프로젝트의 수리 기록 8건, 제스처 과제 4개에서 20건의 실패 사례를 추출했다.
- •실패는 모델 출력 퇴화, 시간적 불일치, 기하 스케일 불안정, 좌표-렌더링 불일치, 런타임 생명주기, 피드백 동기화의 6유형이다.
- •반복 등장하는 수리 방식을 손 랜드마크 모델과 과제 사이의 이벤트 확정 런타임 추상화로 정리했다.
- •새로운 인식 모델·대규모 사용자 평가·정량적 정확도 향상은 주장하지 않는 범위 제한적 기여다.
0단 자동
AI가 규칙대로 쓰고 그대로 게시했습니다. 사람이 따로 보지 않았습니다.
- 규칙 판
- 규칙 판 도입 이전 기사입니다.
- 남기는 것
- 규칙 판 · 모델 · 시각
- 판 기록
- 아직 없습니다.
From Frame-Level Recognition to Event-Level Confirmation: Repair Traces and Runtime Failure Analysis of Public-Space Gesture Interaction
본문 미리보기
arXiv:2607.21601v1 Announce Type: new Abstract: Public-space gesture interaction is often evaluated as a frame-level recognition problem, but deployed systems expose a different failure boundary. In scenic kiosks, exhibition halls, and service terminals, users experience whether an intended action becomes a stable interaction event, not whether individual hand-landmark frames are correct. We call this the recognition-to-interaction gap. This paper analyzes 8 engineering repair records from a
전체 내용이 궁금하다면?
원문을 직접 읽어보세요