ネットワーク化情報環境における知的擬人化インタフェースエージェント・システム

1998 Fiscal Year Annual Research Report

• Project/Area Number: 10558048
• Research Institution: The University of Tokyo
• Principal Investigator: 石塚 満 東京大学, 大学院・工学系研究科, 教授 (50114369)
• Co-Investigator(Kenkyū-buntansha): 土肥 浩 東京大学, 大学院・工学系研究科, 助手 (90260504) ; 伊庭 斉志 東京大学, 大学院・工学系研究科, 助教授 (40302773)
• Keywords: 擬人化エージェント / マルチモーダルインタフェース / マルチモーダルプレゼンテーション / マークアップ言語 / WWW / 音声駆動WWWブラウザ

Research Abstract

VSA(Visual Software Agent)は我々が8年程前より開発を行ってきた、自然感の高い動作する顔、音声対話能力を有するマルチモーダル擬人化エージェントシステムである。本研究によりこのVSAをwwwブラウザ(具体的にはNetscape)と結合し、巨大な分散データベースに育っているWWW情報空間の新形態のインタフェースを実現した。Face-to-face型で音声駆動の新しいWWWブラウザを開発したことになる。ブラウザの制御やハイパーリンク先への移動などを音声で指示することができる。ハイパーリンク先を示すアンカ文字列を全て音声認識できる訳ではないので、表示されたWebページをスキャンし、含まれるハイパーリンクを全て抽出して番号付けして提示し、ユーザがこの番号を発話すれば、Webページの移動を可能にする機能を実現している。Netscapeとの結合はプロキシ(代理サーバ)を介して実現した。日常頻繁に擬人化エージェントを通じてアクセスするようなwww上の情報ソース(例えば天気予報など)を定期的にプリフェッチし、ネットワークによる遅延なく情報提供出来るようにするサブ・ソフトウェアエージェント機構も開発した。
キャラクタエージェントを用いるマルチモーダルインタフェースは上記の我々のシステムのように、これまで主として入出力を含むインタラクションの新形態として開発されてきたが、出力系を主とするマルチモーダルプレゼンテーションの用途も重要になってくる。www上の新しい魅力あるマルチモーダル情報コンテンツの流通基盤としても重要となる。このようなキャラクタエージェントを用いるマルチモーダルプレゼンテーションの記述を特定のシステムに依存せず、容易に記述できるようにするためにマークアップ言語MPML(Multimodal Presentation Markup Language)を作成した。MPMLはXML(eXtensible Markup Language)に準拠し、メディア同期機能はSMILに準拠している。MPMLから音声入出力機能を持つキャラクタシステムであるマイクロソフトエージェントを動作させるコンバータを作成し、魅力的なプレゼンテーションが実現できることを実証した。MPMLの仕様はwww上で公開している。

Research Products

• [Publications] M.Ishizuka,H.Dohi: "Mulutimodal Anthropomorphic Agent connected with WWW Information Space" Proc.9th NEC Research Sympo.: The Human-centric Multimedia Community. (1998)
• [Publications] Y.Takama,H.Dohi,M.Ishizuka: "A Visual Anthropomorphic Agent with Learning Capability of Cooperative Answering Strategy through Speech Dialog" Proc.Asia Pacific Computer Human Interaction(APCHI'98). 260-265 (1998)
• [Publications] 土肥、石塚: "Face-to-Face型擬人化エージェントインタフェースの構築" 情報処理学会論文誌. 40,2. 547-555 (1999)
• [Publications] 筒井、土肥、石塚: "エージェントキャラクタによるWWW連携プレゼンテーション" 電子情報通信学会マルチメディア・仮想環境基礎研報告. MVE98. MVE98-90 (1999)
• [Publications] 土肥、石塚: "旋回型ディスプレイによりアイコンタクトする擬人化エージェント" 情報処理学会第57回全国大会予稿集. No.1N-2 (1998)
• [Publications] 筒井、李、土肥、石塚: "マルチモーダルプレゼンテーションエージェントの作成" 情報処理学会第57回全国大会予稿集. No.1N-9 (1998)