Enhancing Mobile Voice Assistants with WorldGaze

Paper Info

• title: Enhancing Mobile Voice Assistants with WorldGaze
• link: https://chrisharrison.net/projects/worldgaze/WorldGaze.pdf
• author: Sven Mayer et al. / CMU
• venue: CHI'20

  Summary

• iPhoneのフロントカメラとリアカメラを同時に開けて、ユーザーの視線を活用した音声アシスタントを提案した論文
• まずGoogle Mapに手入力 / 音声のみ / 提案手法を Wizard-of-Ozで評価して有用であることを確認したのちに、プロトタイプを作り、精度を評価した

  Comment

• voice assistantをcontext-awareにするというGieradっぽい内容、appleのapi活用しているところからも伺える
• シンプルなアイデアだけど、有用性が高いし、表裏両方のカメラを使うという技術の共有は価値がある