マルチモーダル情報環境下における利用者誤りからの回復技法に関する研究

2002 Fiscal Year Annual Research Report

• Project/Area Number: 13680407
• Research Institution: University of Yamanashi
• Principal Investigator: 今宮 淳美 山梨大学, 工学部, 教授 (40006276)
• Co-Investigator(Kenkyū-buntansha): 郷 健太郎 山梨大学, 工学部, 助教授 (50282009)
• Keywords: マルチモーダルインタフェース / 誤り回復 / Undo / 視覚探索 / 視線入力 / 固視 / 履歴 / 複合現実空間

Research Abstract

本研究の目的は炊世代のユーザインタフェースに関する誤り回復技法を確立することである.次世代のインタフェースに対するインタラクションの仕方としては,PDA,ペン,音声,ジェスチャー,視線などマルチモーダル入力/出力を研究対象にする.
成果1.誤りの視覚的探索による発見機構とツールの評価
操作対象のオブジェクトごとに関連するコマンド履歴をもたせる機構,およびオブジェクト間に制約のある場合の履歴処理アルゴリズムを実現した.さらに,この考えをもとに,作業領域のスナップショット列からなるアニメーション機構をユーザインタフェース開発環境に付け加えて,スナップショット中のオブジェクトを選択することによって関連コマンドを利用者が検索できるインタフェースツールを作成した.
さらこのツールの視覚的探索の実験課題についてユーザビリティ(評価)テストを行い,このツールの有効性および視覚的探索パターンタイプを見つけることができた.
成果2.画像の2次元配置(サムネイル)で特定の画像を目で探す視覚探索におけるデータの記録方法を提案し,3種類の探索パターンを見つけることができた.
成果3.Excelのような記入欄の指定とマウスカーソルの移動に人間の固視情報を利用するシステムを作成し,評価テストを行いその有効性を示した.
成果4.仮想と実空間を混合した複合現実空間における新しいインタラクション方法として,頭部と体のひねり情報を取り入れたインタフェースを構築し,実験によりこのインタフェースの有効性を示した.

Research Products

• [Publications] Hisanori Masuda, Kentaro Go, Atsumi Imamiya: "Effects of grouping thumbnail images in visual search"HCI International 2003. (発表予定). (2003)
• [Publications] 増田尚則, 今宮淳美: "Undo機能をもつグラフィカル履歴ブラウザ設計と視覚的探索分析"電子情報通信学会 論文誌 D-I. Vol.1 J85-D-I No.8. 798-810 (2002)
• [Publications] Masuda, H.K.Ichikawa, K.Go A.Imamiya: "Measuring eye movements and mouse-pointing pattern using thumbnail images"Measuring Behavior 2002. 116-168 (2002)
• [Publications] Q.Zhang, A.Imamiya, Kentaro Go: "Text Entry Application Based on Gaze Pointing"7th ERCIM WORKSHOP USER INTERFACES FOR ALL. 87-102 (2002)
• [Publications] M.Omata, K.Go, A.Imamiya: "An Information Presentation Method in the Augmented Reality World Using a Twist between User's Head and Body"ACM Proceedings of International Workshop on Immersive Telepresence. 44-47 (2002)