人間同士の自然なコミュニケーションを支援する知能メディア技術

2001 Fiscal Year Annual Research Report

• Project/Area Number: 13GS0003
• Research Category: Grant-in-Aid for Creative Basic Research
• Research Institution: The University of Tokyo
• Principal Investigator: 西田 豊明 東京大学, 大学院・情報理工学系研究科, 教授 (70135531)
• Co-Investigator(Kenkyū-buntansha): 谷口 倫一郎 九州大学, 大学院・システム情報科学研究院, 教授 (20136550) ; 辻井 潤一 東京大学, 大学院・情報理工学系研究科, 教授 (20026313) ; 美濃 導彦 京都大学, 総合情報メディアセンター, 教授 (70166099) ; 中村 裕一 筑波大学, 機能工学系, 助教授 (40227947) ; 馬場口 登 大阪大学, 産業科学研究所, 助教授 (30156541)
• Keywords: コミュニケーション / 知能メディア技術 / 環境mディア / 対話環境 / 会話エージェント / 対話的映像メディア / コミュニケーションの統合モデル / 対話データのアーカイブ

Research Abstract

人間にコンピュータの存在を意識させず,人間のもつ豊富なコミュニケーションスキルを活用した人間同士の自然なコミュニケーションを可能にする知能メディア技術を研究開発する.平成13年度は次の成果を得た.
(1)環境メディア技術:自然な形での講義と遠隔講義システムのコミュニケーション支援性能を評価した.自分の顔をメディアとして利用する仮想コミュニケーション方式を検討した.映像要約のためのインタモーダル協調に基づくコンテンツ解析法を具体化した.個人の選好を考慮して要約映像を生成する手法を提案した.ノンバーバル情報獲得のために,実時間3次元形状計測,並列分散環境,音源位置同定に基づくカメラ制御の研究開発などを行った.
(2)会話エージェント技術:物語片テキストと呼ぶ知識・情報の基本単位に関わる言語処理技術の確立を中心とした会話システムの研究を行った.物語片テキストに基づく会話型エージェントシステム,物語片テキストのアーカイブの探訪を支援するシステムなどを研究開発した.映像によるコミュニケーションをサポートするために,自動化撮影システムの開発,重要な意味を持ち,注目する必要がある場面や部分を検出する手法の提案,意味や因果関係の記述に基づいて映像をわかりりすく提示する映像提示手法などを提案した.
(3)対話のコミュニケーション・モデル:半構造化されたデータへの柔軟なアクセスを行うシステムの開発と,非常に豊かな概念体系を持つ生化学分野での専門語を自動認識するシステムの作成を行った.教示者の行動の変化とパラ言語情報の影響が,被教示者の発話の意味獲得に与える影響を分析した.マルチェージェントロボットによる自動実況システムと間に注目した音声合成方式を開発した.言語・パラ言語・非言語情報を統合的に記述するコーパスについて検討を加え,基本設計を行った.

Research Products

• [Publications] 近藤 崇, 角所 考, 美濃導彦: "対話的に獲得される事例に基づく行為者指向の顔メディア変換"システム制御情報学会論文誌. 14・6. 308-315 (2001)
• [Publications] Masayuki Murakaimi, Keisuke Yagi, Koh Kakusho, Michihiko Minoh: "Evaluation of Distance Learning Course shared by UCLA and Kyoto University"Proceedings of international Conference on Information Technology Based Education and Training. (2001)
• [Publications] Koh Kakusho, Takashi Kondo, Michihiko Minoh: "User-Oriented Face Translation Based on Examples Obtained by User Interaction"Proceeding of International Conference on Multimedia and Expo. (2001)
• [Publications] 村上正行, 八木啓介, 角所 考, 美濃導彦: "受講経験・日米受講習慣の影響に注目した遠隔講義システムの評価要因分析"電子情報通信学会論文誌D-I. J84-D-I・9. 1421-1430 (2001)
• [Publications] 新田直子, 馬場口登, 北橋忠宏: "放送型スポーツ映像の構造を考慮した重要シーンへの自動アノテーション付け"電子情報通信学会論文誌. J84-D-II・8. 1838-1847 (2001)
• [Publications] N.Babaguchi, Y.Kawai, T.Kitahashi: "Event Based Indexing of Broadcasted Snorts Video by Intermodal Collaboration"IEEE Trans.Multimedia. Vol.4, No.1. (2002)
• [Publications] N.Babaguchi, Y.Kawai, T.Kitahashi: "Generation of Personalized Abstract of Sports Video"Proceedings of 2001 IEEE International Conference on Multimedia and Expo (ICME2001). 800-803 (2001)
• [Publications] 八木綾子, 有田大作, 谷口倫一郎: "多視点動画像からの実時間三次元形状モデリング"情報処理/産業システム情報化合同研究会. 5-10 (2001)
• [Publications] Ryuya Hoshino, Satoshi Yonemoto, Daisaku Arita, Rin-ichiro Taniguchi: "Real-thee analysis of human motion using multi-view silhouette contours"Proc.of the 12th Scandinavian Conference on Image Analysis. 537-544 (2001)
• [Publications] 星野竜也, 米元聡, 有田大作, 谷口倫一郎: "多視点動画像解析による人間の実時間姿勢推定"電子情報通信学会技術研究報告. IE2001-109〜115. 1-8 (2001)
• [Publications] 有田大作, 谷口倫一郎: "複数カメラとPCクラスタを用いた実時間動画像処理における時刻管理と同期"情処研報CVIM. 9-16 (2002)
• [Publications] Ayako Yagi, Daisaku Arita, Rin-ichiro Taniguchi: "Real-time 3D shape modeling from multi-view image"Proc.of 8th Korea-Japan Joint Workshop --Frontiers of Computer Vision--. 55-61 (2002)
• [Publications] 藤原英樹, 有田大作, 谷口倫一郎: "聴覚障害者支援を目指した屋外環境音認識システム"情報処理学会九州支部研究会報告. 59-64 (2002)
• [Publications] 國田 政志, 谷口 倫一郎, 有田 大作: "音源位置同定によるカメラの首振りに関する研究"情処研報CVIM. (2002)
• [Publications] Rin-ichiro Taniguchi, Satoshi Yonemoto, Daisaku Arita, Ryuya Hoshino: "Real-time Human Motion Analysis for Human-Machine Interface"Advanced Visual Interfaces 2002. (2002)
• [Publications] Takashi Hirata, Harumi Murakami, Toyoaki Nishida: "Supporting Community Knowiledge Building Using Talking-Virtualized Egos Metaphor"International Journal of Knowledge-Based Intelligent Engineering Systems. Vol.5, No.4. 220-227 (2001)
• [Publications] 久保田秀和, 西田豊明: "ユーザの過去発言を利用した複数エージェントによる創造的な対話"電子情報通信学会論文誌,D-I. J-84-D-I・8. 1222-1230 (2001)
• [Publications] Hidekazu Kubota, Toyoaki Nishida: "Maintaining Knowledge of Conversational Agents"Knowledge-Based Intelligent Information Engineering Systems & Allied Technologies, KES'2001, IOS Press. 329-333 (2001)
• [Publications] Hidekazu Kubota, Toyoaki Nishida: "Knowledge Creating Conversational Agents"JSAI-Synsophy International Workshop on Social Intelligence Design. 30-33 (2001)
• [Publications] 西田豊明: "知の創造と学習のための会話型コンテンツ"AIシンポジウム. (2001)
• [Publications] 村山正司, 伊津野英克, 中村裕一, 大田友一: "ビデオアイコンダイアグラムによる映像内容の構造表現"信学技報 PRMU2001-45. 47-54 (2001)
• [Publications] M.Ozeki, Y.Nakamura, Y.Ohta: "Camerawork for Intelligent Video Production -Capturing Desktop Manipulations"Proc.Int.Conf. on Multimedia and Expo, 2001. 41-44 (2001)
• [Publications] M.Murayama, Y.Nakamura, Y.Ohta: "Diagram Generation From Tagged Texts Toward Document Navigation"Proc.Int.Conf.on Multimedia and Expo, 2001. 716-719 (2001)
• [Publications] 尾関基行, 伊藤雅嗣, 中村裕一, 大田友一: "複合コミュニティ空間における注目の共有〜人物動作理解による物体への注釈付け"日本バーチャルリアリティ学会第6回大会論文集. 239-242 (2001)
• [Publications] 里雄一, 北原格, 中村裕一, 大田友一: "複合コミュニティ空間における注目の共有〜指示動作による注目の強調提示システム〜"日本バーチャルリアリティ学会第6回大会論文集. 235-238 (2001)
• [Publications] 伊藤雅嗣, 尾関基行, 中村裕一, 大田友一: "プレゼンテーションにおける手と把持物体の認識と追跡"通信学会ソサエティ大会. (2001)
• [Publications] Y.Sato, M.Takemura, I.Kitahara, J.Hoshino, Y.Nakamura, Y.Ohta: "Visualizing the Focus of Attention in Mixed Reality Community Space"Proc.Int.Conf.on Artificial reality and Telexistence. (2001)
• [Publications] Y.Nakamura, I.Kitahara, J.Hoshino, K.Sakaue, Y.Ohta: "Augmenting Communication in a Shared Mixed-Reality Space-Attention Sharing and Eye Contact Recovery"Proc.Int.Workshop on Pattern Recognition and Understanding for Visual Information Media. 63-74 (2002)
• [Publications] M.Yoshida, K.Torisawa, J.Tsujii: "A method to integrate tables of the World Wide Web"Proc.of the International Workshop on Web Document Analysis (WDA 2001). 31-34 (2001)
• [Publications] M.Yoshida, K.Torisawa, J.Tsujii: "Extracting ontologies from World Wide Web via HTML tables"Proc.of the Pacific Association for Computational Linguistics (PACLING 2001). 332-341 (2001)
• [Publications] Yusuke Miyao, Jun-ichi Tsujii: "Maximum Entropy Estimation Estimation for Feature Forests"Proc.of HLT2002. (2002)
• [Publications] Naoki Yoshinaga, Yusuke Miyao, Kentaro Torisawa, Jun'ichi Tsujii: "Resource sharing among HPSG and LTAG communities by a method of grammar conversion from FB-LTAG to HPSG"Proceedings of ACL/EACL Workshop on Sharing Tools and Resources for Research and Education. 342-351 (2001)
• [Publications] Makino, Takaki, Aihara, Kazuyuki, Tsujii Jun-ichi: "Towards Sentence Understanding : Phase Arbitration in Temporal-Coding Memory Mechanism"The Second Workshop on Natural Language Processing and Neural Networks (NLPNN'2001). 46-52 (2001)
• [Publications] Kazama, Jun'ichi, Miyao, Yusuke, Tsujii, Jun'ichi: "A Maximum Entropy Tagger with Unsupervised Hidden Markov Models"Proceedings of the Sixth Natural Language Processing Pacific Rim Symposium. 333-340 (2001)
• [Publications] 増田勝也, 二宮 崇, 辻井潤一: "GCL問い合わせ代数による構造化テキストのランク検索"言語処理学会第8回年次大会論文集. (2002)
• [Publications] Yoshio Nakao: "A Method for Related-passage Extraction based on Thematic Hierarch"IPSJ Transactions on Databases. 42,・SIG10. 39-53 (2001)
• [Publications] Yoshio Nakao: "How small a distinction among summaries can an IR-based evaluation method identify?"Proc.of NAACL 2001 Workshop on Automatic Summarization (WAS2001). 69-78 (2001)
• [Publications] Yoshio Nakao: "How small a distinction among summaries can the evaluation method identify?"Proc.of the NTCIR-2 workshop. 341-348 (2001)
• [Publications] 新福 哲, 風間 淳一, 宮尾 祐介, 辻井 潤一: "多様な情報源を用いた隠れマルコフモデルによる医学/生物学論文の専門用語認識器"言語処理学会第8回年次大会 発表論文集. (2002)
• [Publications] Jin-Dong Kim, Tomoko Ohta, Yuka Tateisi, Hideki Mima, Jun'ichi Tsujii: "XML-Based Linguistic Annotation of Corpus"Proceedings of the First NLP and XML Workshop. 47-53 (2001)
• [Publications] Tomoko Ohta, Yuka Tateisi, Jin-Dong Kim, Hideki Mima, Jun'ichi Tsujii: "Ontology Based Corpus Annotation and Tools"Proc.Genome Informatics 2001. (2001)
• [Publications] Tomoko Ohta, Yuka Tateisi, Jin-Dong Kim, Hideki Mima, Jun'ichi Tsujii: "GENIA Corpus : an Annotated Research Abstract Corpus in Molecular Biology Domain"Proc.of HLT2002. (2002)
• [Publications] Kenji Nishida, Kentaro Torisawa, Jun'ichi Tsujii: "Compiling an HPSG-based grammar into more than one CFG"the proceedings of PACLING 2001. 199-206 (2001)
• [Publications] H.Mima, S.Ananiadou, G.Nenadic, J.Tsujii: "XML Tag Information Management System --A Workbench for Ontology-based Knowledge Acquisition and Integration"Proc.of Human Language Technology Conference (HLT 2002). (2002)
• [Publications] H.Mima, S.Ananiadou, G.Nenadic, J.Tsujii: "TIMS -A Workbench for Ontology-based Knowledge Acquisition and Integration"Proc.of Natural Language Processing in Biomedical Applications (NLPBA 2002). (2002)
• [Publications] H.Mima, S.Ananiadou, G.Nenadic: "Improving Knowledge Acquisition Through Automatic Term Recognition"Proc.of Panhellenic Conference on Human Computer Interaction (PC-HCI 2001). (2001)
• [Publications] H.Mima, S.Ananiadou, G.Nenadic: "ATRACT Workbench : An Automatic Term Recognition and Clustering of Terms"Proc.of An International Conference on Text Speech and Dialogue (TSD 2001). (2001)
• [Publications] Komatsu, T., Suzuki, K., Hiraki, K., Ueda, K., Oka, N: "Analysis of Speech/Action-Based Communication : In Terms of Mutual Adaptation and Prosodic Effects"Proceedings of 3rd International Conference on Cognitive Science. 143-147 (2001)
• [Publications] Oka, N., Morikawa, K., Komatsu, T., Suzuki, K., Hiraki, K., Ueda, K., Omori, T: "Embodiment without a Physical Body"Workshop on Developmental Embodied Cognition (DECO-2001). (2001)
• [Publications] 鈴木 健太郎, 植田 一博, 開 一夫: "自律的な行動学習を利用した評価教示の計算論的意味学習モデル"認知科学. Vol.9, No.2. (2002)
• [Publications] Komatsu, T., Suzuki, K., Hiraki, K., Ueda, K., Oka, N: "What is Important for Realizing an Autonomous Interactive Robot?"Proceedings of the Seventh International Conference on the Simulation of Adaptive Behavior (SAB'02). (2002)
• [Publications] 植田 一博: "認知ロボティクス:認知・知能を捉えるツールとしてのロボット"ESTRELA. No.86. 18-25 (2001)
• [Publications] 小松 孝徳, 鈴木 健太郎, 開 一夫, 植田 一博, 岡 夏樹: "動的なインタラクションにおける相互適応"日本認知科学会第18回大会論文集. 10-11 (2001)
• [Publications] 小松 孝徳, 鈴木 健太郎, 植田 一博, 開 一夫, 岡 夏樹: "発話-行動インタラクションにおける相互適応と韻律情報の影響"情報処理学会研究報告. 2001-ICS-126. 25-30 (2001)
• [Publications] 伝 康晴: "音声談話データの記述・管理・分析"日本語学. 20巻12号. 10-19 (2001)
• [Publications] 伝 康晴, 宇津呂 武仁, 山田 篤, 浅原 正幸, 松本 裕治: "話し言葉研究に適した電子化辞書の設計"第2回話し言葉の科学と工学ワークショップ講演予稿集. 39-46 (2002)
• [Publications] 浅原 正幸, 米田 隆一, 山下 亜希子, 伝 康晴, 松本 裕治: "リレーショナルデータベースによる品詞タグつきコーパスの管理手法"人工知能学会研究会資料. SIG-SLUD-A103. 7-12 (2002)
• [Publications] Naohiro Matsunami, Kumiko Tanaka-Ishii, Ian Frank, Hitoshi Matsubara: "Lego Mindstorms Cheer Leading Robots"First International Workshop on Entertainment Computing. (2002)
• [Publications] Akihito Aoyama, Kumiko Tanaka-Ishii, Masyuki Takeda: "Relation between Pause and Text Structure in Japanese Story Telling-Towards a more live text-to-speech synthesis"Pacific Association for Computational Linguistics. 68-74 (2001)
• [Publications] 松原仁, 田中久美子, Ian Frank, 田所諭: "大規模災害シミュレータを対象としたリアルタイム実況の自動再生成"人工知能学会論文誌. Vol.17, No.2. (2002)
• [Publications] 青山明史, 田中久美子, 武田正之: "朗読における文書の構造と間の関係に関する考察"言語処理学会. 3 2001. 321-324 (2001)
• [Publications] 青山明史, 田中久美子, 武田正之: "朗読における文書の構造と間の関係に関する考察に基づく音声合成処理システム"人工知能学会. (2001)
• [Publications] Takao Terano, Toyoaki Nishida, Akira Namatame, Yukio Ohsawa, Shusaku Tsumoto, Takashi Washio (eds): "Exploring New Frontiers on Artificial Intelligence -Selected Papers from the First International Workshops of Japanese Society of Artificial Intelligence -"Springer Verlag. (2001)