2002 Fiscal Year Annual Research Report

人間協調マルチメディア相互支援による人間と環境の観察に基づくインタラクション

Research Project

Project/Area Number	14019012
Research Institution	Saitama University
Principal Investigator	久野義徳埼玉大学, 工学部, 教授 (10252595)
Co-Investigator(Kenkyū-buntansha)	中村明生埼玉大学, 工学部, 助手 (00334152)
Keywords	コンピュータビジョン / ヒューマンインターフェース / マルチモーダルインターフェース / 非言語コミュニケーション / 視線 / 意図理解 / サービスロボット / 車椅子
Research Abstract	音声によりロボットと対話できれば、ロボットとのコミュニケーションが容易になる。音声理解については多くの研究があるが、音声で伝達される言語の表面的理解だけでは、ロボットに人間の意図を理解させ、それに基づいた行動を実行させることはできない。ロボットは発話中の物体と実世界の物体を視覚により対応させる必要がある。ここでは、頼まれたものを取ってくるロボットを例にして、音声による依頼を理解してものを取ってくるのに必要な視覚情報処理を検討した。まず、環境内に存在する物体を家具等の環境にほぼ固定された物体(付着対象)と、その他の一般の物体(遊離対象)に分けた。前者については動くことはあまりなく、また視覚で認識しにくいので、最初は人間が音声で誘導し、そこに着いたら、環境に配置されたマークを視覚で認識することによりその位置を求め、地図に記録する。後者については、要素的な画像処理を用意しておき、その処理の組合せと、各処理中のパラメータを変えながら、対象が検出できる処理手順を探索する。成功したら、その際の組合せとパラメータを関連する付着対象と関連付けて記憶する。ロボットを使ううちに、ある物体は特定の場所(付着対象)にあることが多いことがわかってくると、記憶した画像処理手順から調べることにより、効率的に物体が認識できる。また、人間との対話においても、その特定の場所にあるかどうかの確認だけで済むようになり、インタラクションの負担が軽減する。実際に対話と視覚情報処理を行うシステムを開発し、有効性を実験により確認した。また、以上の他に、周囲環境を認識することにより、簡単な音声指令で操縦することのできる知的車椅子を開発し、実験により有効性を示した。

Research Products

(9 results)

All Other

All Publications (9 results)

[Publications] 久野義徳: "ポインティングデバイスとしての身体動作"情報処理学会論文誌:コンピュータビジョンとイメージメディア. Vo.43、No.SIG4. 43-53 (2002)
[Publications] Jeong M.H., Kuno Y., Shimada, N., Shirai, Y.: "Two-Hand Gesture Recognition using Coupled Switching Linear Model"Proceedings of the 16th International Conference on Pattern Recognition. (CD-ROM). (2002)
[Publications] Numajiri, T., Nakamura, A., Kuno, Y.: "Speed Browser Controlled by Eye Movements"Proceedings of the IEEE International Conference on Multimedia and Expo 2002. (CD-ROM). (2002)
[Publications] Kawasaki, H., Nakamura, A., Kuno, Y.: "Memory Aid System by Monitoring Everyday Life"Proceedings of the Second IASTED International Conference on Visualization, Imaging, and Image Processing. 662-667 (2002)
[Publications] Jeong M.H., Kuno Y., Shimada, N., Shirai, Y.: "Recognition of Shape-Changing Hand Gestures"IEICE Transactions on Information and Systems. Vol.E85-D. 1678-1687 (2002)
[Publications] Yoshizaki, M., Kuno, Y., Nakamura, A.: "Mutual Assistance between Speech and Vision for Human-Robot Interface"Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems. (CD-ROM). (2002)
[Publications] Kuno Y., Shimada, N., Shirai, Y.: "Look Where You're Going"IEEE Robotics and Automation Magazine. Vol.9,No.1(印刷中). (2003)
[Publications] Kuno, Y., Nakamura, A.: "Robotic Wheelchair Looking at All People"CHI 2003 Extended Abstracts. (To appear). (2003)
[Publications] Yoshinori Kuno: "Intelligent Wheelchair Looking at Pedestrians and the Caregiver"Proceedings of the 10th International Conference on Human-Computer Interaction. (To appear). (2003)

2002 Fiscal Year Annual Research Report

人間協調マルチメディア相互支援による人間と環境の観察に基づくインタラクション

Principal Investigator

久野 義徳 埼玉大学, 工学部, 教授 (10252595)

Research Products

[Publications] 久野義徳: "ポインティングデバイスとしての身体動作"情報処理学会論文誌:コンピュータビジョンとイメージメディア. Vo.43、No.SIG4. 43-53 (2002)

[Publications] Jeong M.H., Kuno Y., Shimada, N., Shirai, Y.: "Two-Hand Gesture Recognition using Coupled Switching Linear Model"Proceedings of the 16th International Conference on Pattern Recognition. (CD-ROM). (2002)

[Publications] Numajiri, T., Nakamura, A., Kuno, Y.: "Speed Browser Controlled by Eye Movements"Proceedings of the IEEE International Conference on Multimedia and Expo 2002. (CD-ROM). (2002)

[Publications] Kawasaki, H., Nakamura, A., Kuno, Y.: "Memory Aid System by Monitoring Everyday Life"Proceedings of the Second IASTED International Conference on Visualization, Imaging, and Image Processing. 662-667 (2002)

[Publications] Jeong M.H., Kuno Y., Shimada, N., Shirai, Y.: "Recognition of Shape-Changing Hand Gestures"IEICE Transactions on Information and Systems. Vol.E85-D. 1678-1687 (2002)

[Publications] Yoshizaki, M., Kuno, Y., Nakamura, A.: "Mutual Assistance between Speech and Vision for Human-Robot Interface"Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems. (CD-ROM). (2002)

[Publications] Kuno Y., Shimada, N., Shirai, Y.: "Look Where You're Going"IEEE Robotics and Automation Magazine. Vol.9,No.1(印刷中). (2003)

[Publications] Kuno, Y., Nakamura, A.: "Robotic Wheelchair Looking at All People"CHI 2003 Extended Abstracts. (To appear). (2003)

[Publications] Yoshinori Kuno: "Intelligent Wheelchair Looking at Pedestrians and the Caregiver"Proceedings of the 10th International Conference on Human-Computer Interaction. (To appear). (2003)

久野義徳埼玉大学, 工学部, 教授 (10252595)