REsCUE: A framework for REal-time feedback on behavioral CUEs using multimodal anomaly detection

Paper Info

• title: REsCUE: A framework for REal-time feedback on behavioral CUEs using multimodal anomaly detection
• link: https://rikky0611.github.io/resource/paper/rescue_chi2019_paper.pdf
• author: Riku Arakawa and Hiromu Yakura / The University of Tokyo and University of Tsukuba
• venue: CHI'19

  Summary

• コーチングにおいて、挙動を異常検知に基づいてコーチにリアルタイムにフィードバックをすることでコーチがその意味を解釈してコーチングの質をよくすることができたという研究
• 視線・姿勢といったマルチモーダルデータをGMMに基づく異常検知、フィードバックはアップルウォッチで
• 実際のコーチングを通じた実験で、その有効性を定性的に確認した

  Comment

• 異常検知のために、タスクの知識などを必要とせず、他のドメインにも適応でき