2003 Fiscal Year Annual Research Report
視覚による実世界対応に基づく感覚間と行動の相互支援によるヒューマンインタフェース
Project/Area Number |
14350127
|
Research Institution | Saitama University |
Principal Investigator |
久野 義徳 埼玉大学, 工学部, 教授 (10252595)
|
Co-Investigator(Kenkyū-buntansha) |
中村 明生 埼玉大学, 工学部, 助手 (00334152)
|
Keywords | コンピュータビジョン / ヒューマンインタフェース / マルチモーダルインタフェース / 音声理解 / 視線 / サービスロボット / 省略 / アイコンタクト |
Research Abstract |
生活環境内で動作するサービスロボットのヒューマンインタフェースとしては,音声対話によるものが有望である.しかし,自然で人間に負担のない音声対話システムを実現するためには,音声理解の技術だけでは十分ではない.人間同士の自然な対話では,双方の眼前にあるものについては,それに関することを言葉の上では簡略化することが多い.互いに視覚で情報を得ていることが確かな場合,それを簡略化して発話するのが自然である.また,それが許されないようでは,使いやすいインタフェースにはならない.簡略化が行われるのは,会話の当事者が行動により関わっており,明確に言わなくても分かると判断したからと考えられる.そこで,ものの近くにいる,ものを見ている,ものを指差している,ものを手で扱っているという行動を考え,その対象となるものを視覚情報処理で求め,それにより簡略化された発話を理解する方法を検討した.そして,実際にロボットシステムを開発し,有効性を確認した.また,人間とロボットがコミュニケーションを始める合図としてアイコンタクトに注目し,人間とロボットがどのようにしたら確実に合いコンタクトできるか検討した.アイコンタクトの成立には,双方が相手を見ていることと,双方が相手に見られていることに気が付くことが必要と心理学では言われている.そこで,ロボットの方を見ている人間を視覚情報処理で検出したら,ロボットの身体とロボットの顔(ロボット上に液晶ディスプレイで顔を表示)をその人の方に向け,それに対し,人間がロボットの顔の方を見続けるなら,ロボットの顔に表情変化を与えることにより,先に述べた2条件が満足され,人間がアイコンタクトしたと感じられることを実証した.
|
Research Products
(5 results)
-
[Publications] M.H.Jeong, Y.Kuno, N.Shimada, Y.Shirai: "Recognition of Two-Hand Gestures Using Coupled Switching Linear Model"IEICE Transactions on Information and Systems. Vol.E86-D. 1416-1425 (2003)
-
[Publications] Y.Kuno, M.Yoshizaki, A.Nakamura: "Vision-Speech System Becoming Efficient and Friendly through Experience"Proceedings of the IFIP TC13 International Conference on Human-Computer Interaction (INTERACT '03). 801-804 (2003)
-
[Publications] M.Yoshizaki, A.Nakamura, Y.Kuno: "Vision-Speech System Adapting to the User and Environment for Service Robots"Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS 2003). 1290-1295 (2003)
-
[Publications] Z.M.Hanafiah, C.Yamazaki, A.Nakamura, Y.Kuno: "Human-Robot Speech Interface Understanding Inexplicit Utterances Using Vision"CHI2004 Extended Abstracts. (採録決定). (2004)
-
[Publications] D.Miyauchi, A.Sakurai, A.Nakamura, Y.Kuno: "Active Eve Contact for Human-Robot Communication"CHI2004 Extended Abstracts. (採録決定). (2004)