• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2011 Fiscal Year Annual Research Report

会話エージェント研究共有プラットフォームの構築と利用技術の研究

Research Project

Project/Area Number 19100001
Research InstitutionKyoto University

Principal Investigator

西田 豊明  京都大学, 情報学研究科, 教授 (70135531)

Co-Investigator(Kenkyū-buntansha) 河原 達也  京都大学, 学術メディアセンター, 教授 (00234104)
黒橋 禎夫  京都大学, 情報学研究科, 教授 (50263108)
中野 有紀子  成蹊大学, 理工学部, 准教授 (40422505)
大本 義正  京都大学, 情報学研究科, 助教 (90511775)
黄 宏軒  立命館大学, 情報理工学部, 助教 (00572950)
Keywordsエージェント / 会話エージェント / 対話エージェント / 音声言語
Research Abstract

(1)仮想空間内で人間とインタラクションするエージェント集団を駆動するためのプラットフォームとして,没入型インタラクションシステムICIEを整備した.複数のKinectを用いて没入型環境での身体計測を可能にした.多地点画像を用いた実空間の没入化,3次元仮想キャラクタの半自動生成も開発した.(2)ジェスチャ自動生成機能のついた会話エージェントをセカンドライフ上で開発した.会話エージェントのモバイル端末への実装,拡張現実感(AR)との連携も行った.(3)没入型仮想空間において人間と円滑な非言語インタラクションを行うことによってコミュニケーションの文化差を教示するための没入型多人数インタラクションプラットフォームVISIEを開発し,パイロットスタディを行った.(4)音声認識エンジンJulius,自然言語解析パーザKNP,音声合成エンジンをモジュール間通信で結合した形で音声対話システムを実装し,共同研究等を通して,複数の企業に供与した.(5)従来開発していた変化点発見とモチーフ発見プログラムを核とし,さらに評価用信号生成ルーチン,評価ルーチンを含むツールパッケージを開発し公開した.(6)没入型環境における知識空間の複合的共有視点提示を用いた協調作業支援システムを開発した.セカンドライフ用の会話エージェントの道案内タスクへの応用を行った.軽症の認知症患者や健常な高齢者の日常生活を支援するモバイル型会話エージェントの研究開発を行った.移動履歴をリアルタイムでデータベースに蓄積し,知識化することで利用者の日常生活と記憶を支援するシステムの研究開発を展開した.(7)複数の応答生成モジュールでの発話の候補から最適なものを選択することで対話を実現し,強化学習によって対話戦略を自動獲得するようにした.(8)潜在連想テストを用いた人間の態度の分析IATの拡張を行った.

  • Research Products

    (58 results)

All 2012 2011

All Journal Article (8 results) (of which Peer Reviewed: 7 results) Presentation (50 results)

  • [Journal Article] Neary : Conversational Field Detection Based on Situated Sound Similarity2011

    • Author(s)
      Toshiya Nakakura, Yasuyuki Sumi, Toyoaki Nishida
    • Journal Title

      IEICE Transactions-D

      Volume: 94 Pages: 1164-1172

    • Peer Reviewed
  • [Journal Article] 議論への参加態度と非言語情報に基づくファシリテーションの分析2011

    • Author(s)
      大本義正・戸田泰史・植田一博・西田豊明
    • Journal Title

      情報処理学会論文誌

      Volume: 52 Pages: 1234-1245

    • Peer Reviewed
  • [Journal Article] Toward incorporating emotions with rationality into a communicative virtual agent2011

    • Author(s)
      Andrey Kiselev, Benjamin Alexanaer Hacker, Thomas Wankerl, Nivaz
    • Journal Title

      Ai & Society

      Volume: 26 Pages: 275-289

    • DOI

      10.1007/s00146-010-0309-z

    • Peer Reviewed
  • [Journal Article] Formation conditions of mutual adaptation in human-agent collaborative interaction2011

    • Author(s)
      Yong Xu, Yoshimasa Ohmoto, Shogo Okada, Kazuhiro Ueda, Takanori
    • Journal Title

      Appl.Intell.

      Volume: 36 Pages: 208-228

    • DOI

      10.1007/s10489-010-0255-y

    • Peer Reviewed
  • [Journal Article] 視線と頭部動作に基づくユーザの会話参加態度の推定2011

    • Author(s)
      石井亮, 大古亮太, 中野有紀子, 西田豊明
    • Journal Title

      情報処理学会論文誌

      Volume: 52 Pages: 3625-3636

  • [Journal Article] Bayesian learning of a language model from continuous speech2011

    • Author(s)
      G.Neubig, M.Mimura, S.Mrori, T.Kawahara
    • Journal Title

      IEICE Trans.D

      Volume: 95 Pages: 614-625

    • Peer Reviewed
  • [Journal Article] 述語項の類似度に基づく情報抽出・推薦を行う音声対話システム2011

    • Author(s)
      吉野幸一郎, 森信介, 河原達也
    • Journal Title

      情報処理学会論文誌

      Volume: 52 Pages: 3386-3397

    • Peer Reviewed
  • [Journal Article] 音声会話コンテンツにおける聴衆の反応に基づく音響イベントとホットスポットの検出2011

    • Author(s)
      河原達也, 須見康平, 緒方淳, 後藤真孝
    • Journal Title

      情報処理学会論文誌

      Volume: 52 Pages: 3363-3373

    • Peer Reviewed
  • [Presentation] 利用者屋外行動履歴を用いた高齡者見守りエージェントのための会話モデル構築に向けて2012

    • Author(s)
      松下広樹, 黄宏軒, 川越教示
    • Organizer
      ヒューマンインターフェース学会第85回研究会「認知症や記憶障害に対する工学的支援技術及び一般(SIG-AT-01)」
    • Place of Presentation
      京都市
    • Year and Date
      2012-03-25
  • [Presentation] 雑談対話システムにおける強化学習を用いた応答生成モジュールの選択2012

    • Author(s)
      江頭勇佑, 柴田知秀, 黒橋禎夫
    • Organizer
      言語処理学会第18回年次大会
    • Place of Presentation
      広島市
    • Year and Date
      2012-03-15
  • [Presentation] 言語・空間情報に基づくメタバースアバタへのジェスチャ自動付与機構2012

    • Author(s)
      塚本剛生, 中野有紀子
    • Organizer
      第74回情報処理学会全国大会
    • Place of Presentation
      名古屋市
    • Year and Date
      2012-03-07
  • [Presentation] 認知症患者のコミュニケーション特性の評定における会話エージェントの利用2012

    • Author(s)
      酒井洋一, 野中裕子, 安出清, 中野有紀子
    • Organizer
      第74回情報処理学会全国大会
    • Place of Presentation
      名古屋市
    • Year and Date
      2012-03-07
  • [Presentation] 複数ユーザ対会話エージェントとの多人数インタラクションにおける優位性の自動推定方法2012

    • Author(s)
      福原佑貴, 中野有紀子
    • Organizer
      第74回情報処理学会全国大会
    • Place of Presentation
      名古屋市
    • Year and Date
      2012-03-06
  • [Presentation] 社交ダンスのモーションデータにおける相違動作の検出と動作の教示手法の提案2011

    • Author(s)
      上亟正樹, 関優樹, 黄宏軒, 李周浩, 川越恭二
    • Organizer
      第12回計測自動制御学会システムインテグレーション部門講演会
    • Place of Presentation
      京都市
    • Year and Date
      20111223-20111225
  • [Presentation] 仮想社交ダンスインストラクターにおける細分化教示動作の自動抽出2011

    • Author(s)
      上亟正樹, 関優樹, 黄宏軒, 李周浩, 川越恭二
    • Organizer
      HAIシンポジウム2011
    • Place of Presentation
      京都市
    • Year and Date
      20111203-20111205
  • [Presentation] Discovering Causal Change Relationships Between Processes in Complex Systems2011

    • Author(s)
      Yasser Mohammad, Toyoaki Nishida
    • Organizer
      IEEE SII 2011
    • Place of Presentation
      Kyoto, Japan
    • Year and Date
      2011-12-20
  • [Presentation] On Comparing SSA-based Change Point Discovery Algorithms2011

    • Author(s)
      Yasser Mohammad, Toyoaki Nishida
    • Organizer
      IEEE SII 2011
    • Place of Presentation
      Kyoto, Japan
    • Year and Date
      2011-12-20
  • [Presentation] グループ会話対応型会話エージェントにおける受話者推定システム2011

    • Author(s)
      馬場直哉, 黄宏軒, 中野有紀子
    • Organizer
      HAIシンポジウム2011
    • Place of Presentation
      京都市
    • Year and Date
      2011-12-03
  • [Presentation] An Engineering Approach to Conversational Informatics2011

    • Author(s)
      Toyoaki Nishida
    • Organizer
      International Workshop on Multimodality in Multispace Interaction (MIMI)
    • Place of Presentation
      Takamatsu, Japan
    • Year and Date
      2011-12-02
  • [Presentation] Making a virtual Conversational Agent be Aware of the Addressee of users Utterances in Multi-user Conyersation from Nonverbal Information2011

    • Author(s)
      Hung-Hsuan Huang, Naoya Baba, Yukiko Nakano
    • Organizer
      the 13th International Conference on Multimodal Interaction (ICMI2011)
    • Place of Presentation
      Alicante, Spain
    • Year and Date
      2011-11-16
  • [Presentation] ICIE : immersive environment for social interaction based on socio-spacial information2011

    • Author(s)
      Ohmoto, Y., Ohasni, H., Lala, D., Mori, S., Sakamoto K., Kinoshita K., Nishida T.
    • Organizer
      TAAI 2011
    • Place of Presentation
      Taoyuan, Taiwan
    • Year and Date
      2011-11-12
  • [Presentation] Handling greeting gesture in simulated crowd2011

    • Author(s)
      Sutasinee Thovutikul, Toyoaki Nishida
    • Organizer
      GrC 2011
    • Place of Presentation
      Kaohsiung, Taiwan
    • Year and Date
      2011-11-09
  • [Presentation] A method to dynamically estimate emphasizing points ana aegree by using verbal and nonverbal information and physiological indices2011

    • Author(s)
      Yoshimasa Ohmoto, Misao Kataoka, Takashi Miyake, Toyoaki Nishida
    • Organizer
      GrC 2011
    • Place of Presentation
      Kaohsiung, Taiwan
    • Year and Date
      2011-11-09
  • [Presentation] A spatially immersive interaction environment using real-time human measurement2011

    • Author(s)
      Shingo Mori, Yoshimasa Ohmoto, Toyoaki Nishida
    • Organizer
      GrC 2011
    • Place of Presentation
      Kaohsiung, Taiwan
    • Year and Date
      2011-11-09
  • [Presentation] Social intelligence design for intercultural communication2011

    • Author(s)
      Toyoaki Nishida
    • Organizer
      GrC 2011
    • Place of Presentation
      Kaohsiung, Taiwan
    • Year and Date
      2011-11-08
  • [Presentation] How Culture and Social Relationship Affect Performing and Perceiving of Postures2011

    • Author(s)
      Afia Akhter Lipi, Yukiko Nakano
    • Organizer
      IEEE International Conference on Granular Computing (GrC 2011)
    • Place of Presentation
      Kaohsiung, Taiwan
    • Year and Date
      2011-11-08
  • [Presentation] Talking with Uncertainty2011

    • Author(s)
      Toyoaki Nishida
    • Organizer
      IUKM 2011
    • Place of Presentation
      Hangzhou, China
    • Year and Date
      2011-10-28
  • [Presentation] Fast speaker normalization and adaptation based on BIC for meeting speech recognition2011

    • Author(s)
      R.Gomez, T.Kawahara
    • Organizer
      APSIPAASC, 2011
    • Place of Presentation
      Xi'an, China
    • Year and Date
      2011-10-20
  • [Presentation] Towards a virtual environment for capturing behavior in cultural crowds2011

    • Author(s)
      Divesh Lala, Sutasinee Thovutikul, Toyoaki Nishida
    • Organizer
      ICDIM 2011
    • Place of Presentation
      Melbourne, Australia
    • Year and Date
      2011-09-27
  • [Presentation] 話し言業の音声認識からコミュニケーションの理解へ-国会審議の音声認識からポスター会話の分析へ-2011

    • Author(s)
      河原達也
    • Organizer
      日本音声学会全国大会
    • Place of Presentation
      京都大学
    • Year and Date
      2011-09-24
  • [Presentation] Webから獲得した知識に基づく雑談対話システム2011

    • Author(s)
      江頭勇佑, 柴田知秀, 黒橋禎夫
    • Organizer
      情報処理学会関西支部支部大会
    • Place of Presentation
      大阪市
    • Year and Date
      2011-09-20
  • [Presentation] Identifying Utterances Addressed to an Agent in Multiparty Human-Agent Conversations2011

    • Author(s)
      Naoya Baba, Hung-Hsuan Huang, Yukiko I. Nakano
    • Organizer
      the 11th International Conference on Intelligent Virtual Agents (IVA2011)
    • Place of Presentation
      Reykjavik, Iceland
    • Year and Date
      2011-09-16
  • [Presentation] Estimating a User's Conversational Engagement Based on Head Pose Information2011

    • Author(s)
      Ryota Ooko, Ryo Ishii, Yukiko I.Nakano
    • Organizer
      the 11th International Conference on Intelligent Virtual Agents (IVA2011)
    • Place of Presentation
      Reykjavik, Iceland
    • Year and Date
      2011-09-16
  • [Presentation] Culture-related Topic Selection in Small Talk Conversations across Germany and Japan2011

    • Author(s)
      B.Endrass, Y.Nakano, A.Lipi, M.Rehm, E.Andre
    • Organizer
      11th International Conference on Intelligent Virtual Agents (IVA2011)
    • Place of Presentation
      Reykjavik, Iceland
    • Year and Date
      2011-09-15
  • [Presentation] Source Orientation in Communication with a Conversational Agent2011

    • Author(s)
      Yugo Hayasni, Hung-Hsuan Huang, Victor Vladimirovich Kryssanoy Akira, Urao A.
    • Organizer
      the 11th International Conference on Intelligent Virtual Agents (IVA'11)
    • Place of Presentation
      Reykjavik, Iceland
    • Year and Date
      2011-09-15
  • [Presentation] Toward a Conversational Virtual Instructor of Ballroom Dance2011

    • Author(s)
      Masaki Uejo, Hung-Hsuan Huang, Joo-Ho Lee, Kyoji Kawagoe
    • Organizer
      the 11th International Conference on Intelligent Virtual Agents (IVA'11)
    • Place of Presentation
      Reykjavik, Iceland
    • Year and Date
      2011-09-15
  • [Presentation] How Culture and Social Relationship Affect the Perception of Agent's Nonverbal Behaviors?2011

    • Author(s)
      Afia Akhter Lipi, Fumie Nori, Birgit Endrass, Yukiko Nakano, Elisabeth
    • Organizer
      Workshop on Culturally Motivated Virtual Characters
    • Place of Presentation
      Reykjavik, Iceland
    • Year and Date
      2011-09-14
  • [Presentation] 会話エージェントによる認知症患者への語りかけの効果2011

    • Author(s)
      酒井洋一, 安田清, 中野有紀子
    • Organizer
      第10回情報科学技術フォーラム(FIT2011)
    • Place of Presentation
      函館市
    • Year and Date
      2011-09-09
  • [Presentation] ヒューマノイドロボットのジェスチャに対する人の注視行動の分析2011

    • Author(s)
      柴崎優太, 上出純平, 福原佑貴, 中野有紀子
    • Organizer
      第10回情報科学技術フォーラム(FIT2011)
    • Place of Presentation
      函館市
    • Year and Date
      2011-09-09
  • [Presentation] Towards Conversational Artifacts2011

    • Author(s)
      Toyoaki Nishida
    • Organizer
      AMT 2011
    • Place of Presentation
      Lanzhou, China
    • Year and Date
      2011-09-07
  • [Presentation] Combining slot-based vector space model for voice book search2011

    • Author(s)
      C.Lee, T.Kawahara, A.Rudnicky
    • Organizer
      Int'l Workshop Spoken Dialogue Systems (IWSDS)
    • Place of Presentation
      Granada, Spain
    • Year and Date
      2011-09-02
  • [Presentation] Automatic comma insertion of lecture transcripts based on multiple annotations2011

    • Author(s)
      Y.Akita, T.Kawahara
    • Organizer
      INTERSPEECH
    • Place of Presentation
      Florence, ITALY
    • Year and Date
      2011-08-31
  • [Presentation] Denoising using optimized wavelet filtering for automatic speech recognition2011

    • Author(s)
      R.Gomez, T.Kawahara
    • Organizer
      INTERSPEECH
    • Place of Presentation
      Florence, ITALY
    • Year and Date
      2011-08-29
  • [Presentation] 人対エージェントの会話における頭部動作情報に基づくユーザ態度の推定2011

    • Author(s)
      大古亮太, 石井亮, 中野有紀子
    • Organizer
      電子情報通信学会ヒューマンコミュニケーション基礎研究会(HCS)
    • Place of Presentation
      京都市
    • Year and Date
      2011-08-26
  • [Presentation] Online Incremental Clustering with Distance Metric Learning for High Dimensional Data2011

    • Author(s)
      Shogo Okada, Toyoaki Nishida
    • Organizer
      IEEE International Joint Conference on Neural Networks (IJCNN 2011)
    • Place of Presentation
      San Jose, USA
    • Year and Date
      2011-08-02
  • [Presentation] Cultural Difference in Nonverbal Behaviors in Negotiation conversations : Towards a Model for Culture-adapted Conversational Agents2011

    • Author(s)
      Fumie Nori, Afia Akhter Lipi, Yukiko Nakano
    • Organizer
      14th International Conference on Human-Computer Interaction (HCII2011)
    • Place of Presentation
      Orlando, Florida
    • Year and Date
      2011-07-12
  • [Presentation] Spoken dialogue system based on information extraction using similarity of predicate argument structures2011

    • Author(s)
      K.Yoshino, S.Mori, T.Kawahara
    • Organizer
      SIGdial Meeting Discourse & Dialogue
    • Place of Presentation
      Seoul, South Korea
    • Year and Date
      2011-07-05
  • [Presentation] Measuring Implicit Attitudes in Human-Computer Interaction2011

    • Author(s)
      Andrey Kiselev, Niyaz Abdikeev, Toyoaki Nishida
    • Organizer
      Thirteenth International Conference on Rough Sets, Fuzzy Sets, Data Mining and Granular Computing (RSFDGrC-2011)
    • Place of Presentation
      Moscow, Russia
    • Year and Date
      2011-06-27
  • [Presentation] 音声認識技術の展望2011

    • Author(s)
      河原達也
    • Organizer
      関西経済同友会サイエンスフォーラム
    • Place of Presentation
      大阪市
    • Year and Date
      2011-06-15
  • [Presentation] ヒューマンエージェントインタラクションを通じた人間の選好構造の推定2011

    • Author(s)
      大本義正・三宅峰・箭内亮太・西田豊明
    • Organizer
      人工知能学会全国大会
    • Place of Presentation
      盛岡市
    • Year and Date
      2011-06-03
  • [Presentation] 継続的な知識構築を支援する知識構造化システムの開発とその利用2011

    • Author(s)
      神田賢一・大本義正・西田豊明
    • Organizer
      人工知能学会全国大会
    • Place of Presentation
      盛岡市
    • Year and Date
      2011-06-03
  • [Presentation] 音声認識ソフトウェアJulius2011

    • Author(s)
      河原達也, 李晃伸
    • Organizer
      人工知能学会全国大会Alレクチャー
    • Place of Presentation
      盛岡市
    • Year and Date
      2011-06-02
  • [Presentation] コミュニケーションロボットにおけるジェスチャ表出の有効性2011

    • Author(s)
      福原佑貴, 上出純平, 中野有紀子
    • Organizer
      第25回人工知能学会全国大会
    • Place of Presentation
      盛岡市
    • Year and Date
      2011-06-02
  • [Presentation] 直感的ロボットWOZシステムの構築とそれを利用したHRIとHHIの比較2011

    • Author(s)
      大橋洋輝・大本義正・西田豊明
    • Organizer
      人工知能学会全国大会
    • Place of Presentation
      盛岡市
    • Year and Date
      2011-06-01
  • [Presentation] 多地点からの画像に基づくHAI用没入型仮想空間の構築2011

    • Author(s)
      森槙悟・大本義正・西田豊明
    • Organizer
      人工知能学会全国大会
    • Place of Presentation
      盛岡市
    • Year and Date
      2011-06-01
  • [Presentation] 認知症患者のための語りかけエージェント2011

    • Author(s)
      中野有紀子, 比企野純太, 安田清
    • Organizer
      第25回人工知能学会全国大会
    • Place of Presentation
      盛岡市
    • Year and Date
      2011-06-01
  • [Presentation] Culture-related dfferences in aspects or behavior for virtual characters across Germany and Japan2011

    • Author(s)
      Birgit Endrass, Elisabetn Andre, Yukiko Nakano, Matthias Rehm, Afia Akhtpr Lipi
    • Organizer
      the 10th International Conference on Autonomous Agents and Multiagent Systems (AAMAS2011)
    • Place of Presentation
      Taipei, Taiwan
    • Year and Date
      2011-05-04
  • [Presentation] Collection and Analysis of Multimodal Interaction in Direction Giving Dialogues : Towards an Automatic Gesture Selection Mechanism for Metayerse Ayatars2011

    • Author(s)
      Takeo Tsukamoto, Yumi Muroya, Masashi Okamoto, Yukiko Nakano
    • Organizer
      AAMAS2011 Workshop on the uses of Agents for Education, Games and Simulations
    • Place of Presentation
      Taipei, Taiwan
    • Year and Date
      2011-05-02

URL: 

Published: 2013-06-26  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi