Multimodal Interaction Environment Based on High-Speed Projection

2019 Fiscal Year Final Research Report

• Project/Area Number: 16H02853
• Research Category: Grant-in-Aid for Scientific Research (B)
• Allocation Type: Single-year Grants
• Section: 一般
• Research Field: Human interface and interaction
• Research Institution: Tohoku University
• Principal Investigator: Kagami Shingo 東北大学, 情報科学研究科, 准教授 (90361542)
• Co-Investigator(Kenkyū-buntansha): 嵯峨 智 熊本大学, 大学院先端科学研究部(工), 准教授 (10451535)
• Project Period (FY): 2016-04-01 – 2019-03-31
• Keywords: ユーザインタフェース / マルチモーダルインタフェース / 画像，文章，音声等認識 / バーチャルリアリティ / ディスプレイ

Outline of Final Research Achievements

This study investigated projection-based augmented reality environments that make use of high-speed optical projection to produce multimodal sensation and to enable multimodal detection. Namely, we developed an interactive projection mapping system for a fast moving surface, optical touch detection systems for remote surfaces, projection-based tactile augmentation, and a thermal-radiation-based haptic display utilizing a scanned laser beam.

Free Research Field

計測工学

Academic Significance and Societal Importance of the Research Achievements

光学投影技術に基づく映像提示，触覚提示，タッチ操作検出のための新しい技術の開発に成功した．映像提示技術については，映像表示用の投影光が画像追跡に干渉するという積年の課題を解決し，事前調整やマーカ配置の不要な高精度・高速プロジェクションマッピングを実現した．さらに，レーザー光投影に基づく遠隔タッチ操作検出や空間触覚提示といった新技術の可能性を切り拓いた．