映像コンテンツ製作におけるマルチモーダル感情表出モデルの構築に関する研究

2002 Fiscal Year Annual Research Report

• Project/Area Number: 14208031
• Research Institution: Waseda University
• Principal Investigator: 白井 克彦 早稲田大学, 理工学部, 教授 (10063702)
• Co-Investigator(Kenkyū-buntansha): 山崎 芳男 早稲田大学, 大学院・国際情報通信研究科, 教授 (10257199) ; 米山 正秀 東洋大学, 工学部, 教授 (60277358) ; 小林 哲則 早稲田大学, 理工学部, 教授 (30162001) ; 村上 真 東洋大学, 工学部, 専任講師 (80329119) ; 大平 茂輝 早稲田大学, 理工学部, 助手 (60339695)
• Keywords: 感情表出モデル / 映像制作 / ディジタルアクタ / 動作制御 / 韻律情報

Research Abstract

本研究の目的は、人物の感情と動作との関連性を表す感情表出モデルを構築することである。具体的には、コンピュータ内のディジタルアクタに対して人間が言葉で演技指導を行い、イメージから表出した言葉(概念)と動作との関係を記述することで間接的にモデルの構築を行う。本年度はディジタルアクタシステムを実装する前段階として、人物の基本動作の分析を行った。
人物動作の可動部位は決まっており、それらを複雑に動作させることによって様々な動きを生成することができる。したがって、それぞれの可動部位がどのように連携し、また互いにどのような拘束を受けながら運動するかを記述するモデルが必要である。そこで、モーションキャプチャデータとして人間の歩行動作を収集し、各関節の連動性を重回帰モデルによりルール化し、それを積み重ねたルールセットとしてモデルを構築した。また、その動作の再現性から、身体関節の中で運動性が高い関節群と低い関節群との分類を行った。その結果、歩行動作はいくつかのレベルの独立な運動として構成されており、それぞれの動作はいくつかのキー関節から生成可能であることが確認された。また、動作速度に応じて人間の動作がどのように変化するかを明らかにするために、同じくモーションキャプチャデータとして収録された速度の異なる歩行動作に対して分析を行った。
本年度の成果より、運動性の高い関節群をまとめて制御することができ、ディジタルアクタを少ないパラメータセットにより制御することが可能となった。

Research Products

• [Publications] 村上 真, 米山 正秀, 白井 克彦: "Labeled Graph Matchingを用いた動画像に対する人物頭部及び表情変化を伴う部位の抽出"電子情報通信学会論文誌. vol.J85-D-II, no.11. 1656-1663 (2002)
• [Publications] Makoto MURAKAMI, Katsuhiko SHIRAI, Masahide YONEYAMA: "Human Face Extraction using Genetic Algorithm with Similarity of Subspace Method as a Fitness Value"International Journal of Knowledge-Based Intelligent Engineering Systems. vol.6, no.4. 178-185 (2002)
• [Publications] Makoto Murakami, Masahide Yoneyama, Katsuhiko Shirai: "Accurate Human Face Extraction using Genetic Algorithm and Subspace Method"Frontiers in Artificial Intelligence and Applications. vol.87. 745-754 (2002)
• [Publications] 菊池英明, 鈴木堅悟, 大久保崇, 小林季実子, 大平茂輝, 白井克彦: "音声対話における韻律情報の役割についての分析"Proceedings for 2002 2nd Plenary Meeting/Symposium on Prosody and Speech Processing. 99-102 (2003)