• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

対話文脈の再推定メカニズムを備えた柔軟なモルチモーダル対話システムの構築

Research Project

Project/Area Number 17700185
Research Category

Grant-in-Aid for Young Scientists (B)

Allocation TypeSingle-year Grants
Research Field Perception information processing/Intelligent robotics
Research InstitutionToyohashi University of Technology

Principal Investigator

桂田 浩一  Toyohashi University of Technology, 大学院・工学研究科, 講師 (80324490)

Project Period (FY) 2005 – 2007
Project Status Completed (Fiscal Year 2007)
Budget Amount *help
¥3,400,000 (Direct Cost: ¥3,400,000)
Fiscal Year 2007: ¥1,000,000 (Direct Cost: ¥1,000,000)
Fiscal Year 2006: ¥1,100,000 (Direct Cost: ¥1,100,000)
Fiscal Year 2005: ¥1,300,000 (Direct Cost: ¥1,300,000)
KeywordsPLSA / トピック推定 / 表情認識 / マルチモーダル対話 / トピック抽出 / 対話データ収集 / 対話システム
Research Abstract

(1) PLSAを用いたトピック推定法について
昨年度までは,統計的言語モデルであるPLSAを用いて,ユーザ発話のトピックを推定する方法を検討してきた.本年度はユーザの現時点での発話に加えて,対話履歴(直近の発話で用いられた単語・トピック情報)を用いることにより,精度の高いトピック推定を可能にした.旅行予約対話を対象とした実験の結果,トピック推定率が72.04%から90.01%に向上することが確認できた.
(2) ユーザの表情を取得するモジュールの開発について
トピック推定において補助的に用いるため,ユーザの表情を取得するモジュールを開発した.従来の表情認識では静止画像を対象にしたものが多いのに対し,本研究では動画像を対象とする.顔動画像を適切に処理するため,時系列データの処理に適したリカレントニューラルネットワーク,および顔画像の時間経過に伴うオプティカルフローを利用することで,精度の向上を目指した.9名の被験者の6表情を用いた実験を行ったところ,通常の多階層ニューラルネットワークを用いる場合では認識率が63.2%であったのに対し,提案手法では68.8%の認識率となり,有効性を確認できた.
(3) その他,マルチモーダル対話の応用システムについて
上記の研究の他,マルチモーダル対話システムの応用として,ユーザの視線軌跡情報を用いた動画像推薦システム,およびデフォルメ地図を用いた携帯端末用情報提供・共有システムを開発し,対外発表を行うと共に,産業財産権の申請を行った.

Report

(3 results)
  • 2007 Annual Research Report
  • 2006 Annual Research Report
  • 2005 Annual Research Report
  • Research Products

    (12 results)

All 2008 2007 2006 2005

All Journal Article (10 results) (of which Peer Reviewed: 3 results) Presentation (1 results) Patent(Industrial Property Rights) (1 results)

  • [Journal Article] Canonicalization of Feature Parameters for Robust Speech Recognition based on Disrinctive Phonetic Feature (DPF) Vectors2008

    • Author(s)
      Mohammad Huda, Kouichi Katsurada, 他
    • Journal Title

      IEICE Transactions on Information and Systems E91-D No.3

      Pages: 488-498

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 生徒の検索情報を利用した講義の重要語抽出2007

    • Author(s)
      篠原 修二, 桂田 浩一, 他
    • Journal Title

      人工知能学会誌 Vol.22,No.6

      Pages: 604-611

    • NAID

      10022008247

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 幼児の学習バイアスを利用したエージェントによる語意学習の効率化2007

    • Author(s)
      田口 亮, 桂田 浩一, 他
    • Journal Title

      人工知能学会誌 Vol.22,No.4

      Pages: 444-453

    • NAID

      10022007908

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 語彙学習工一ジェントにおけるバイアスの自律調整について2007

    • Author(s)
      篠原修二, 田口亮, 桂田浩一, 新田恒雄
    • Journal Title

      人工知能学会誌 Vol. 22, No. 2

      Pages: 103-114

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 幼児エージェントにおけるバイアスの形成と言語の構造化2007

    • Author(s)
      篠原修二, 田口亮, 橋本敬, 桂田浩一, 新田恒雄
    • Journal Title

      情報処理学会 : 数理モデル化と応用研究会論文誌 Vol.48, No. SIG2 (TO M16)

      Pages: 125-146

    • NAID

      110004687502

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 因果性に基づく信念形成モデルとN本腕バンディット問題への適用2007

    • Author(s)
      篠原修二, 田口亮, 桂田浩一, 新田恒雄
    • Journal Title

      人工知能学会誌 Vol. 22, No. 1

      Pages: 58-68

    • NAID

      10022007077

    • Related Report
      2006 Annual Research Report
  • [Journal Article] A Pitch-Synchronous Peak-Ampliture (PS-PA) Based Feature Extraction Method for Noise-Robust ASR2006

    • Author(s)
      Muhammad Ghulam, Kouicni Katsurada, Junsei Horikawa, Tsuneo Nitta
    • Journal Title

      IEICE Transactions on Information and Systems Vol. E89-D, No. 11

      Pages: 2766-2774

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Development of Self-Learning Support System Using Arousal Level and Lecture Information2006

    • Author(s)
      Yurie Iribe, et al.
    • Journal Title

      International Journal of Computer Science and Network Security Vol. 6, No. 8A

      Pages: 11-17

    • Related Report
      2006 Annual Research Report
  • [Journal Article] エージェントによる語意学習効率化のための対話戦略獲得2006

    • Author(s)
      田口亮, 篠原修二, 桂田浩一, 入部百合絵, 新田恒雄
    • Journal Title

      ヒューマンインタフェース学会論文誌 Vol.8, No.3

      Pages: 391-402

    • NAID

      10019299381

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Interaction Builder : A Rapid Prototyping Tool for Developing Web-Based MMI Applications2005

    • Author(s)
      Kouichi Katsurada et al.
    • Journal Title

      IEICE Transactions on Information and Systems Vol.E88-D, No.11

      Pages: 2461-2468

    • NAID

      110003501989

    • Related Report
      2005 Annual Research Report
  • [Presentation] Management of Static/Dynamic Properties in a Multimodal Interaction System2007

    • Author(s)
      Kouichi Katsurada, et. al.
    • Organizer
      INTERSPEECH2007
    • Place of Presentation
      ベルギー・アントワープ
    • Related Report
      2007 Annual Research Report
  • [Patent(Industrial Property Rights)] 特許2008

    • Inventor(s)
      入部百合絵, 桂田浩一, 他
    • Industrial Property Number
      2008-028860
    • Filing Date
      2008-02-08
    • Related Report
      2007 Annual Research Report

URL: 

Published: 2005-04-01   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi