2004 Fiscal Year Annual Research Report
人間の動作解析に基づく感情と意図の理解およびそのコミュニケーションへの応用
| Project/Area Number |
14208037
|
|---|
| Research Institution | Kobe University |
|---|
Principal Investigator |
有木 康雄 神戸大学, 都市安全研究センター, 教授 (10135519)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
上原 邦昭 神戸大学, 自然科学研究科, 教授 (60160206)
熊野 雅仁 龍谷大学, 理工学部, 実験助手 (50319498)
|
|---|
| Keywords | データマイニング / 画像認識 / 音声認識 / 感情 / コミュニケーション / 動作解析 / 意図理解 / モーションキャプチャ |
|---|
| Research Abstract |
人間と共生する機械を実現するために、データマイニング・画像認識・音声認識・感性情報処理により、人間の身体動作の癖やその内面にある感情に焦点を絞ったコミュニケーション方式の研究を行った。
(1)モーションデータからの規則性の発見と感情の質の解析に関する研究(上原)
ディジタルアーカイブのようにモーションデータが大量に蓄積されている場合、内容によって人間の動作を組織化・構造化しておかなければ検索することさえ困難になる。このため、動作データを3次元空間中を動く軌跡としてとらえるだけではなく、その動作が行われる速度、あるいは動作中の姿勢を解析することで、運動スキルの比較を行い、高度なスキルを持つ被験者の特徴を得る実験を行った。モーションキャプチャシステムEVaを用いて収録された顔表情データを基に、各感情に固有の特徴量と、他の感情に比べて特異な特徴を分けて抽出した。これら2種類の特徴を基に感情を分類し、どのような思いを持っているかについて、感情の質の解析を発展させた。
(2)人間の動作・感情・音声・画像認識の統合による意図理解(有木・熊野)
基本動作認識と感情認識、音声認識、画像認識を統合する研究を行うことにより、特定の意図がどのような基本動作系列、音声、画像系列、ならびに感情を伴って表出されているかについて分析することができる。これを逆に利用することにより、人間の動作と感情の表出を統合して、特定の意図を推定する研究を行った。例えば、教室のような場所で、大型ディスプレイに映っている人物を指さして「この人は誰」と聞くタスクにおいては、この人は誰という音声を認識する音声認識と、指差しという動作認識、さらに顔画像認識が統合されている。このシステムに、ユーザがどのような感情を持って問い合わせを行ったかを判定するために、顔の感情分析を付与する研究を行った。
|
