2003 Fiscal Year Annual Research Report

人間協調マルチメディア相互支援による人間と環境の観察に基づくインタラクション

Research Project

Project/Area Number	15017211
Research Institution	Saitama University
Principal Investigator	久野義徳埼玉大学, 工学部, 教授 (10252595)
Co-Investigator(Kenkyū-buntansha)	中村明生埼玉大学, 工学部, 助手 (00334152)
Keywords	コンピュータビジョン / ヒューマンインタフェース / マルチモーダルインタフェース / 非言語コミュニケーション / 視線 / 意図理解 / サービスロボット / 車椅子
Research Abstract	生活環境内で動作するサービスロボットのヒューマンインタフェースとしては,音声対話によるものが有望である.しかし,自然で人間に負担のない音声対話システムを実現するためには,音声理解の技術だけでは十分ではない.人間同士の自然な対話では,双方の眼前にあるものについては,それに関することを言葉の上では簡略化することが多い.互いに視覚で情報を得ているごとが確かな場合,それを簡略化して発話するのが自然である.また,それが許されないようでは,使いやすいインタフェースにはならない.簡略化が行われるのは,会話の当事者が行動により関わっており,明確に言わなくても分かると判断したからと考えられる.そこで,ものの近くにいる,ものを見ている,ものを指差している,ものを手で扱っているという行動を考え,その対象となるものを視覚情報処理で求め,それにより簡略化された発話を理解する方法を検討した.そして,実際にロボットシステムを開発し,有効性を確認した.また,周囲環境と人間の行動を見て,人間と協調した行動をとれる車椅子について検討した.今年度は,車椅子に付き添う介護者と環境情報から,介護者の行動の意図を認識し,それに応じた行動をとる方法を開発した.例えば,進行方向にドアがあって,それを開けてその向こうに行きたいときには,車椅子の横や後ろにいた介護者は前に出て,ドアをあける.車椅子は介護者が前に出るときは停止し,ドアがあいたら前に進む.このような行動が自動的にできる方法を開発し実験で有効性を確認した.

Research Products

(6 results)

All Other

All Publications (6 results)

[Publications] M.H.Jeong, Y.Kuno, N.Shimada, Y.Shirai: "Recognition of Two-Hand Gestures Using Coupled Switching Linear Model"IEICE Transactions on Information and Systems. Vol.E86-D. 1416-1425 (2003)
[Publications] Y.Kuno, A.Nakamura: "Robotic Wheelchair Looking at All People"CHI2003 Extended Abstracts. 1008-1009 (2003)
[Publications] Y.Kuno, T.Yoshimura, M.Mitani, A.Nakamura: "Robotic Wheelchair Looking at All People with Multiple Sensors"Proceedings of the IEEE International Conference on Multisensor Fusion and Integration for Intelligent Systems (MFI 2003). 341-346 (2003)
[Publications] Y Kuno, M.Yoshizaki, A.Nakamura: "Vision-Speech System Becoming Efficient and Friendly through Experience"Proceedings of the IFIP TC13 International Conference on Human-Computer Interaction (INTERACT '03). 801-804 (2003)
[Publications] M.Yoshizaki, A.Nakamura, Y.Kuno: "Vision-Speech System Adapting to the User and Environment for Service Robots"Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS 2003). 1290-1295 (2003)
[Publications] Z.M.Hanafiah, C.Yamazaki, A.Nakamura, Y.Kuno: "Human-Robot Speech Interface Understanding Inexplicit Utterances Using Vision"CHI2004 Extended Abstracts. (採録決定). (2004)

2003 Fiscal Year Annual Research Report

人間協調マルチメディア相互支援による人間と環境の観察に基づくインタラクション

Principal Investigator

久野 義徳 埼玉大学, 工学部, 教授 (10252595)

Research Products

[Publications] M.H.Jeong, Y.Kuno, N.Shimada, Y.Shirai: "Recognition of Two-Hand Gestures Using Coupled Switching Linear Model"IEICE Transactions on Information and Systems. Vol.E86-D. 1416-1425 (2003)

[Publications] Y.Kuno, A.Nakamura: "Robotic Wheelchair Looking at All People"CHI2003 Extended Abstracts. 1008-1009 (2003)

[Publications] Y.Kuno, T.Yoshimura, M.Mitani, A.Nakamura: "Robotic Wheelchair Looking at All People with Multiple Sensors"Proceedings of the IEEE International Conference on Multisensor Fusion and Integration for Intelligent Systems (MFI 2003). 341-346 (2003)

[Publications] Y Kuno, M.Yoshizaki, A.Nakamura: "Vision-Speech System Becoming Efficient and Friendly through Experience"Proceedings of the IFIP TC13 International Conference on Human-Computer Interaction (INTERACT '03). 801-804 (2003)

[Publications] M.Yoshizaki, A.Nakamura, Y.Kuno: "Vision-Speech System Adapting to the User and Environment for Service Robots"Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS 2003). 1290-1295 (2003)

[Publications] Z.M.Hanafiah, C.Yamazaki, A.Nakamura, Y.Kuno: "Human-Robot Speech Interface Understanding Inexplicit Utterances Using Vision"CHI2004 Extended Abstracts. (採録決定). (2004)

久野義徳埼玉大学, 工学部, 教授 (10252595)