視覚による動作理解に基づく人間・ロボット協調作業システムの研究

1998 Fiscal Year Annual Research Report

• Project/Area Number: 09750293
• Research Institution: The University of Electro-Communications
• Principal Investigator: 木村 浩 電気通信大学, 大学院・情報システム学研究科, 助教授 (40192562)
• Keywords: 動作理解 / 視覚 / タスクモデル / 人間-ロボット協調

Research Abstract

本研究では、将来の育児や介護への応用を目指して、ロボットが人と協調して作業を行う、特に、人の作業の補助を行うことを考える。その際、ロボットは、現在人により何が行われているかを正確に認識・理解し、それにあった補助を行う必要がある。そこで本研究では、人がデータグラブなどの装備を装着することなく自然に行う作業を視覚により認識し、自律的に補助動作を行う協調作業システムを構築した。そこでは、協調作業時の認識・補助動作ための作業モデルは、人があらかじめ両腕を用いてロボットの前でデモンストレーションして見せた一連のシーンを解析することにより、自動的にシステム内に生成された.そして,協調作業時にロボットは視覚を用いて,現在の作業対象物や人間による把持の有無を認識し,作業目的・作業モデルに基づいて,必要な補助作業を計画・実行した.
具体的には,
(a) カラートラッキングビジョンとステレオ視覚を用いて,3次元物体認識システムを構築した.
(b) カラー・トラッキングビジョンとリアルタイム・レンジセンサを用いて,人の両手のトラッキングと把持形状の認識システムを構築した.
(c) 作業モデルの枠組を定義した上で,人が単独で両腕により行う動作に対して,動作モデルに基づいて事象とスタックによる解析を行い,作業モデルを自動生成した.
(d) 人が片腕または両腕で行う作業を観察し、動作モデルに基づいて人の動作を理解し,人の作業とロボットの作業を分離し補助動作計画を行うシステムを構築した.その際,適切な補助動作を計画するためには、動作モデルだけでなく動作の履歴から発生する動作文脈の管理が重要となる。このために、作業モデルに基づく「動作文脈の管理システム」を構築した。
(e) 人とマニピュレータ・多指ハンドによる「おもちゃパーツの組み立て実験」を行い,上記システムの有効性を検証し,動作の認識に基づく人間・ロボット協調システムの可能性を示した.

Research Products

• [Publications] 木村浩、池内克史: "視覚による動作認識に基づく人とロボットの協調" ロボティクスシンポジア予稿集. 120-126 (1997)
• [Publications] 木村浩: "カラートラッキングビジョンを用いた多関節ロボットの運動認識" 日本ロボット学会学術講演予稿集. vol.C. 957-958 (1997)
• [Publications] 木村浩: "国有空間法を用いた多関節ロボットの運動認識" 日本ロボット学会学術講演会予稿集. Vd.B. 337-338 (1997)
• [Publications] 木村浩、片野英明: "動作文脈に基づく多関節ロボットの動作理解" ロボティクスシンポジア予稿集. 31-35 (1998)
• [Publications] H.Kimura,H.Katano: "Vision-Based Motion Reccgnition of the Hexapoel for Automomaus Assistance" proc.of IROS98. vol.1. 1-6 (1998)
• [Publications] 堀内智之、木村浩、池内克史: "APOシステムの柔軟物操作への応用" 日本ロボット学会学術講演会. vol.A. 55-56 (1998)