俳優の動画像解析に基づく個性的な演技の生成

1996 Fiscal Year Annual Research Report

• Project/Area Number: 08234207
• Research Institution: Niigata University
• Principal Investigator: 山本 正信 新潟大学, 工学部, 教授 (00242397)
• Keywords: 動画像解析 / コンピュータグラフィックス / ディジタル映画 / コンピュータアニメーション / モーションワープ / 俳優 / 動作の個性 / ビデオカメラ

Research Abstract

コンピュータアニメーションで,キャラクタに個性的な動作を行わせるには,実際の人間の動作を真似るのが近道である.本研究では,ビデオカメラから得られた映像を使って動作を定量化する.この方法は人体に接触することなく,動作の測定が可能である.得られた動作をCG上で再現することにより,ディジタル映画の製作を目指している.本年度は,次の要素技術の開発を行った.
(1)幾何モデラの開発:人体や家具などの立体,布や紙などの曲面,紐や針金などの曲線,これらを統一されたデータ構造で表わすことのできる幾何モデラの開発を進めている.現在,基本的立体や自由曲面の生成を終え,OpenGLやRayshadeを利用したレンダリング機能を加えている.
(2)人間動作の解析:動画像中の人体を追跡することにより,動作の定量化を行っている.このとき,幾つかのキーフレームを動画像中に設け,キーフレームでのモデルフィッティングによりずれを補正する手法を開発した.これにより長時間の追跡も可能となった.
(3)動作の生成:測定した動作データから新たな動作を生成する手法を検討した.筋力の働く場合にはモーションワープ法,働かない場合には動力学的手法を使用した.両者を使い分けることにより,自然な動作の生成が可能となった.
(4)サウンドトラック:CG映像に音声や効果音を加えるシステムを開発した.このシステムは,声優による台詞,音源からの効果音,DTM(ディスクトップミュージック)で作成されたBGMを,MTR(マルチトラックレコーダ)上でディジタル合成するものである.前年度に作成したアニメーションに日本語版と英語版のサウンドトラックを付け加えた.

Research Products

• [Publications] 山本正信: "行動の動画像解析とコンピュータアニメーション" 電子情報通信学会技術報告. PRMU96-11. 75-82 (1996)
• [Publications] 山本正信、成 秀火玄: "濃淡画像からの復元形状に基づく3次元運動推定" テレビジョン学会誌. 50巻・10号. 1522-1527 (1996)
• [Publications] 近藤拓也,他: "動画像からの動作感性情報の抽出" 電子情報通信学会論文誌(D-II). 80巻・1号. 247-255 (1997)
• [Publications] 速水康晴,他: "動画像からの平面移動カメラの位置・姿勢・自己運動の決定" 電子情報通信学会論文誌(A). 80巻・3号(印刷中). (1997)
• [Publications] 佐藤明知,他: "多視点動画像からの人間動作の追跡と再構成" 電子情報通信学会論文誌(D-II). 80巻・6号(印刷中). (1997)
• [Publications] 山本正信(分担執筆): "感性の科学-感性情報処理へのアプローチ-" サイエンス社, 217 (1997)
• [Publications] 山本正信(分担執筆): "画像処理標準テキストブック" 画像情報教育振興協会, 361 (1997)