2001 Fiscal Year Annual Research Report

感性情報通信に向けた顔の分析合成処理共通プラットホームの構築

Research Project

Project/Area Number	11555097
Research Institution	The University of Tokyo
Principal Investigator	原島博東京大学, 大学院・情報学環, 教授 (60011201)
Co-Investigator(Kenkyū-buntansha)	橋本周司早稲田大学, 理工学部, 教授 (60063806) 原文雄東京理科大学, 工学部, 教授 (90084376) 谷内田正彦大阪大学, 大学院・基礎工学研究科, 教授 (20029531) 山田寛日本大学, 文理学部, 助教授 (80191328) 森島繁生成蹊大学, 工学部, 教授 (10200411)
Keywords	顔認識 / 顔画像合成 / 顔モデル整合 / 共通ソフトウェア / 顔アニメーション / 感性コミュニケーション / 擬人化エージェント / 顔インタフェース
Research Abstract	現在までに、多くの研究機関や大学において、顔の認識や顔画像合成に関する様々な研究が行われ、コンピュータの処理能力の向上と共に実用化の直前レベルまでに達している。しかし、これらの要素技術は、個別の要求に対して研究開発された場合が殆どで、他のシステムとのインタフェースを含む拡張性や統一性を持たないものが多い。このような背景において、本研究では、顔画像を対象として汎用性のある構造化された基本ソフトウェアシステムの構築を目指した。このソフトウェアシステムの中心は、顔画像の認識と合成技術を統一して扱える汎用的な顔情報処理ライブラリが中心となっている。顔の認識技術としては、顔と顔部品の抽出、記述、ならびに動画像中でのそれらの追跡、さらに個人照合や表情認識のための基本ツールの開発を行った。また汎用化のためのAPI開発も行った。顔画像合成では、自然さとリアルさを併せ持つ顔、顔部品の3次元モデルと顔の表情、動きの合成が可能な顔画像合成ルールの構築を行った。顔形状の標準モデルを用意し、認識システムの出力から得られた顔特徴点に基づいて個人の顔写真に整合して、個人の顔形状に合ったモデルを作成する手法を確立した。各研究機関で開発された基本アルゴリズムを相互に結合し、さらに汎用化を目指す工夫を行ったこと。個々の表情変形ルールに対して大幅なクオリティ向上を目指したこと。またインタラクション技術として、感情の取り扱い方法や、ネットワークを経由したコミュニケーションについて具体的に検討したこと。またWEB上でのコミュニケーションを汎用的に記述する方法を実現した点が新しい成果である。また心理的な分析により顔表情アニメーションの時間的な変化について検討した点も全く新しい成果である。

Research Products

(7 results)

All Other

All Publications (7 results)

[Publications] Masataka Doi: "Real-time Vision System for Autonomous Mobile Robot"Proc. of 2001 IEEE International Workshop on Robot and Human Interaction. Roman 'Ol. 442-449 (2001)
[Publications] Yasushi Yagi: "Facial feature extraction from frontal face image"WCC2000 Proc. Int. Conf. Signal Processing. 2. 1225-1232 (2000)
[Publications] Dadet Pramadihant: "Integrated Person Identification and Expression Recognition from Facial Images"IEICE Trans. on Information and Systems. E84-D・7. 850-866 (2001)
[Publications] Yoshimitsu Aoki: "Simulation of Postoperative 3D Facial Morphology using Physics-base Head Model"The Visual Comuter. 17・Issue 2. 121-131 (2001)
[Publications] Naiwala, P., Chandrasiri: "Real Time Facial Expression Recognition System with Applications to Facial Animation in MPEG-4"IEICE Trans. Inf. & Syst.. E84-D・8. 1007-1017 (2001)
[Publications] Barakonyi, M: "A 3D Agent with Synthetic Face and Semiautonomous Behavior for Multimodal Presentations"Proc. Multimedia Technology amd Applications Conference (MTAC2001, IEEE Computer Soc.). 21-25 (2001)
[Publications] 山田寛: "表情によるコミュニケーション"岩波書店. 253 (2001)

2001 Fiscal Year Annual Research Report

感性情報通信に向けた顔の分析合成処理共通プラットホームの構築

Principal Investigator

原島 博 東京大学, 大学院・情報学環, 教授 (60011201)

Research Products

[Publications] Masataka Doi: "Real-time Vision System for Autonomous Mobile Robot"Proc. of 2001 IEEE International Workshop on Robot and Human Interaction. Roman 'Ol. 442-449 (2001)

[Publications] Yasushi Yagi: "Facial feature extraction from frontal face image"WCC2000 Proc. Int. Conf. Signal Processing. 2. 1225-1232 (2000)

[Publications] Dadet Pramadihant: "Integrated Person Identification and Expression Recognition from Facial Images"IEICE Trans. on Information and Systems. E84-D・7. 850-866 (2001)

[Publications] Yoshimitsu Aoki: "Simulation of Postoperative 3D Facial Morphology using Physics-base Head Model"The Visual Comuter. 17・Issue 2. 121-131 (2001)

[Publications] Naiwala, P., Chandrasiri: "Real Time Facial Expression Recognition System with Applications to Facial Animation in MPEG-4"IEICE Trans. Inf. & Syst.. E84-D・8. 1007-1017 (2001)

[Publications] Barakonyi, M: "A 3D Agent with Synthetic Face and Semiautonomous Behavior for Multimodal Presentations"Proc. Multimedia Technology amd Applications Conference (MTAC2001, IEEE Computer Soc.). 21-25 (2001)

[Publications] 山田寛: "表情によるコミュニケーション"岩波書店. 253 (2001)

原島博東京大学, 大学院・情報学環, 教授 (60011201)