• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Research-status Report

傾聴エージェントのためのマルチモーダル情報を利用した応答モデルの研究

Research Project

Project/Area Number 16K00289
Research InstitutionRitsumeikan University

Principal Investigator

黄 宏軒  立命館大学, 情報理工学部, 准教授 (00572950)

Co-Investigator(Kenkyū-buntansha) 林 勇吾  立命館大学, 総合心理学部, 准教授 (60437085)
Project Period (FY) 2016-04-01 – 2019-03-31
Keywords会話エージェント / 高齢者支援 / 対話システム / 感情モデル / マルチモーダルインタラクション / 傾聴
Outline of Annual Research Achievements

今年度は本提案プロジェクトに先立ってH25年度に実施した傾聴会話実験で収集したデータコーパスを分析し,話し手の会話参加態度の自動推定手法の開発を継続的に行っている.この実験では実験参加者同士による傾聴会話において,参加者たちが自分と相手の実験中の会話参加態度について実験直後に1から7までの7段階評価を行った.
これは評価者の主観によるものだったため,評価者ごとにZスコアで正規化をしたうえで教師あり学習の目的変数とした.参加者態度の予測に用いる説明変数については,今年度は発話ターンと韻律情報(インテンシティ,ピッチ,話速)の利用を検討した.回帰モデルを構築し,絶対平均誤差(MAE)0.10の推定精度を得た.
この実験とその結果の分析,予備的に検討した推定モデルでの成果をまとめた論文がヒューマンインターフェース学会論文誌の特集号「感性と感情 -計測・評価・モデル化とその応用-」に掲載された.また,本研究で開発したプログラムなどを他に行っているコミュニケーション分析関係のプロジェクトに活用しており,それらについても国内外の会議で発表を行った.

Current Status of Research Progress
Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

今年度の目標は傾聴会話においての話し手の参加態度の自動推定モデルの開発であった.成果としては,以前から研究を行っている話し手の表情(笑顔),頭部運動(頷き)といった非言語行動と発話ターン情報(発話量・沈黙)を説明変数としての利用を予備的に検討した分類モデルと新たに発話の韻律情報を利用した回帰モデルに分かれてしまっているが,容易に統合できると考えている.

Strategy for Future Research Activity

最初にH28年度でできなかった話し手の非言語行動,発話ターン情報,韻律情報を統合した参加態度推定モデルを構築する.これと同時に,H29に予定していた傾聴エージェントの中核である会話コンポーネントの開発に取り組む.会話コンポーネントの開発においては,まず,高齢者を利用者と想定した場合の話題の選定と話題遷移モデルの構築する.次に,この話題モデルと参加者態度を考慮した会話コンポーネントの開発を予定している.

Causes of Carryover

研究の遅れにより予定していた学会発表ができなかったため.

Expenditure Plan for Carryover Budget

次年度に繰り越す基金40万円分と本来予定している直接経費100万円と合わせてH29年度には140万円の予算となる.その使途は以下のように予定している.国際会議IVA 2017(スウェーデン, 35万円×1人計35万円),国際会議HAI 2017(ドイツ, 35万円×2人計70万円),人工知能学会全国大会(名古屋,6万円×3人計18万円)の参加費・旅費,そひて,会話実験参加者の謝礼金(2千円×25人計5万円)とデータアノテーションの費用(3万円×4人計12万円)に充てる.

  • Research Products

    (9 results)

All 2017 2016

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Acknowledgement Compliant: 1 results) Presentation (8 results) (of which Int'l Joint Research: 3 results)

  • [Journal Article] 傾聴エージェントの実現に向けた傾聴会話参加者の自他評価による数値化モデルの提案2016

    • Author(s)
      黄 宏軒,澁澤紗優美,林 勇吾,川越恭二
    • Journal Title

      ヒューマンインタフェース学会論文誌

      Volume: 18 Pages: 373-384

    • Peer Reviewed / Acknowledgement Compliant
  • [Presentation] Toward a Supporting System of Communication Skill: The Influence of Functional Roles of Participants in Group Discussion2017

    • Author(s)
      Qi Zhang, Hung-Hsuan Huang, Seiya Kimura, Shogo Okada, Yuki Hayashi, Yutaka Takase, Yukiko Nakano, Naoki Ohta, Kazuhiro Kuwabara
    • Organizer
      HCI International 2017
    • Place of Presentation
      Vancouver, Canada
    • Year and Date
      2017-07-12
    • Int'l Joint Research
  • [Presentation] グループディスカッション参加者の役割に基づいた会話状況とコミュニケーション能力の分析2017

    • Author(s)
      張 琪,木村清也,黄 宏軒,岡田将吾,林 佑樹,高瀬 裕,中野有紀子,桑原和宏
    • Organizer
      第31回人工知能学会全国大会
    • Place of Presentation
      ウインクあいち(愛知県・名古屋市)
    • Year and Date
      2017-05-24
  • [Presentation] グループディスカッションに参加するロボットにおけるアテンション対象モデルの提案2017

    • Author(s)
      木村清也,張 琪,黄 宏軒,岡田将吾,林 佑樹,高瀬 裕,中野有紀子,大田直樹,桑原和宏
    • Organizer
      第31回人工知能学会全国大会
    • Place of Presentation
      ウインクあいち(愛知県・名古屋市)
    • Year and Date
      2017-05-24
  • [Presentation] 教員志願者の練習システムにおける仮想学級の雰囲気モデルの提案2017

    • Author(s)
      福田匡人,黄 宏軒,桑原和宏,大田直樹
    • Organizer
      電子情報通信学会・ヒューマンコミュニケーション基礎研究会
    • Place of Presentation
      なみきスクウェア(福岡県・北九州市)
    • Year and Date
      2017-01-27
  • [Presentation] グループディスカッションにおける参加者役割とコミュニケーション能力印象評価の関連性分析2016

    • Author(s)
      張 琪,木村清也,黄 宏軒,岡田将吾,林 佑樹,高瀬 裕,中野有紀子,大田直樹,桑原和宏
    • Organizer
      HAIシンポジウム 2016
    • Place of Presentation
      東京大学駒場キャンパス(東京都・目黒区)
    • Year and Date
      2016-12-03
  • [Presentation] Development of a Virtual Classroom for High School Teacher Training2016

    • Author(s)
      Hung-Hsuan Huang, Yuki Ida, Kohei Yamaguchi, Kyoji Kawagoe
    • Organizer
      16th International Conference on Intelligent Virtual Agents (IVA 2016)
    • Place of Presentation
      Los Angeles, USA
    • Year and Date
      2016-09-21
    • Int'l Joint Research
  • [Presentation] Composing the Atmosphere of a Virtual Classroom with a Group of Student Agents2016

    • Author(s)
      Masato Fukuda, Hung-Hsuan Huang, Naoki Ohta, Kazuhiro Kuwabara
    • Organizer
      16th International Conference on Intelligent Virtual Agents (IVA 2016)
    • Place of Presentation
      Los Angeles, USA
    • Year and Date
      2016-09-21
    • Int'l Joint Research
  • [Presentation] 仮想学級による教員採用試験のための場面指導練習システムの開発2016

    • Author(s)
      福田匡人,冠野哲也,黄 宏軒,桑原和宏
    • Organizer
      第30回人工知能学会全国大会
    • Place of Presentation
      北九州国際会議場(福岡県・北九州市)
    • Year and Date
      2016-06-07

URL: 

Published: 2018-01-16  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi