研究課題
本プロジェクトの目的は、ユーザの感情状態や興味に的確に対応する新しいタイプのコミュニケーションモデルを実現することであった。このプロジェクトの重要な特徴は以下のとおりである。・ ユーザの感情の状態を認識するために生体信号とテキストを利用する。・ ユーザの興味の状態(「視覚的注意」能力)を認識するために眼球運動分析を利角する。・ ユーザとのインタラクションに仮想エージェントを用いる。本プロジェクトの重要な成果は以下のとおりである。・ 実時間で生体信号を処理し、それらを頑健かつ正確にユーザの感情状態として解釈するという感情ベースの新たなインタラクションモデル。実現されたシステムでは、インタラクティブなゲームにおいて、仮想エージェントがユーザの感情に適切な反応を提供する。実証研究により、このシステムの有効性を示した。ユーザとの実時間インタラクションを実現するために、Multimodal Presentation Markup Language(MPML)の新バージョンを設計および実装する必要があった。その結果として開発したMPML3Dオーサリング言語は、反応(reactive)型モデルに基づいており、それによりユーザや他の仮想エージェントインタフェースから入力がプレゼンテーションの最中にいつでも可能なため、自然で自由なインタラクションを実現できる。MPML3Dは現在、最も強力で柔軟性のあるオーサリング言語であり、専門家以外の人でも使いやすいものである。・ 開発した「Visual Attentive Presentation Agents(注視プレゼンテーションエージェント)」システムは、ロスアンゼルス(アメリカ合衆国)で開催された第6回International Conference on Intelligent Virtual Agents(IVA'06)においてGALA Award2006を受賞した(「Lifelike Agent Application」部門)。・ 国際的学術論文8本(ヨーロッパのもの1本を含む)、国際会議論文28本、国際ワークショップ論文4本、国際デモ論文1件。
すべて 2008 2007 その他
すべて 雑誌論文 (19件) (うち査読あり 19件) 備考 (2件)
Proceedings of The Third International Joint Conference on Natural Language Processing(IJCNLP-08), Hyderabad, India
ページ: 895-900
Proceedings 2nd International Conference on INtelligent TEchnologies for interactive enterTAINment(INTETAIN-08), Playa del Carmen, Cancun Mexico (ACM Digital Library)
The 2007 IEEE/WIC/ACM International Conference on Web Intelligence(WI-07), Silicon Valley, USA
ページ: 614-620
Proceedings 9th International Conference on Multimodal Interfaces(ICMI-07), Nagoya, Japan
ページ: 319-322
ページ: 346-349
Affective Computing and Intelligent Interaction Proceedings 2nd International Conference on Affective Computing and Intelligent Interaction(ACII-07), Lisbon, Portugal 4738/2007
ページ: 737-738
ページ: 191-202
Second International Conference, ACII 2007 Lisbon, Portugal, September 12-14, 2007 Proceedings 4738/2007
ページ: 218-229
Proceedings 7th International Conference on Intelligent Virtual Agents(IVA-07), Paris, France 4722/2007
ページ: 395-396
ページ: 161-174
Proceedings 7th International Conference on Intelligent Virtual Agents(IVA-07)}, Paris, France 4722/2007
ページ: 283-295
Proceedings 1st IEEE International Conference on Semantic Computing(ICSC-07), Irvine, CA, USA
ページ: 27-36
International Journal of Semantic Computing 1
ページ: 319-334
Online Communities and Social Computing Proceedings 12th International Conference on Hu man-Computer Interaction, Beijing, China(LNCS) 4564/2007
ページ: 141-150
ACM International Conference Proceeding Series Proceedings ACM SIGCHI International Conference on Advances in Computer Entertainment Technology(ACE-07), Salzburg, Austria 203
ページ: 284-285
Proceedings ACM SIGCHI International Conference on Advances in Computer Entertainment Technology (ACE-07), Salzburg, Austria 203
Smart Graphics 8th International Symposium, SG 2007, Kyoto, Japan, June 25-27, 2007. Proceedings 4569/2007
ページ: 73-84
The LEEE Transactions on Industrial Electronics 54
ページ: 692-698
International Journal of Commputational Intelligence Research 3
ページ: 177-190
http://research.nii.ac.jp/~prendinger/Kakenhi_FY2005-07/Kakenhi_FY2005-07.html
http://research.nii.ac.jp/~prendinger/