• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2021 年度 実績報告書

知識に基づく個人適応型対話制御機能を有するマルチモーダル対話システム

研究課題

研究課題/領域番号 19H04159
研究機関成蹊大学

研究代表者

中野 有紀子  成蹊大学, 理工学部, 教授 (40422505)

研究分担者 坂戸 達陽  成蹊大学, 理工学部, 助教 (10780679)
研究期間 (年度) 2019-04-01 – 2023-03-31
キーワード会話参加者特性 / ジェスチャ / 性格特性
研究実績の概要

2021年度の主な成果として,以下の2点について報告する.
(1)グループディスカッションにおける会話参加者の説得力の推定:会話参加者の特性認識の研究として,グループディスカッションにおける会話参加者の説得力の推定モデルを提案した.まず,グループディスカッションにおける4人の参加者それぞれの説得力の度合いを,アノテーターが評価した.次に,GRUベースのニューラルネットワークを用いて,発話,言語,視覚(頭部ポーズ)特徴を用いて,各参加者の説得力を推定するマルチモーダル・マルチパーティモデルを作成した.
実験の結果,マルチモーダルモデルとマルチパーティモデルは,ユニモーダルモデルと一人用モデルに比べて優れた性能を示した.最も優れたマルチモーダル・マルチパーティ・モデルは,説得力の高低を80%の精度で予測し,グループ内で最も説得力のある参加者を77%の精度で予測することを達成した.
(2)ジェスチャによる性格特性表現方法の開発:まず,会話参加者の性格特性と,2者対話におけるハンドジェスチャーの表現力との関係を分析し,Big5性格特性の各次元において,その特性を強く有する人とそうでない人では,どのような動作特徴(大きさや速さなど)に違いがあるのかを調べた.次に,この分析結果に基づいて,エージェントの性格特性を表現できるジェスチャ生成方法を提案した.ユーザスタディの結果,提案手法によって生成されたエージェントのアニメーションから,期待される性格特性が知覚できることが明らかになった.特に,外向性と情緒不安定性については,本手法により生成されたエージェントのジェスチャは,被験者に期待通りの印象を与えることに成功した.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

ユーザ適応的な会話エージェントの実現のためには,第1に,ユーザの特性を自動的に認識する技術が必要である.本年度は,その1つである説得力に焦点を当て,説得力自動推定モデルを作成した.高低二値分類での性能は80%を達成し.良好な結果を得ることができた.もう1つの側面である,会話エージェント実装技術として,ジェスチャによる性格特性の表現方法の研究を進めた.こちらは,人同士の対話データを分析して得られた性格特性とジェスチャとの関係を,会話エージェントのアニメーションに適用することにより,会話エージェントに性格特性を付与することに成功した.ユーザ適応的な会話エージェントを実現するには,エージェントの個性を表現する技術も重要であり,本研究は,その目的に寄与するものである.

今後の研究の推進方策

最終年度に向け,対話システムエンジンの高度化に取り組む予定である.そのために,対話コーパスを収集し,人同士のやり取りから,対話ストラテジを学習するモデルを作成し,人により近い対話制御を行うことができる対話エンジンの実現を目指す.同時に,会話参加者の特性認識についてもより幅を広げて取り組んでゆく.

  • 研究成果

    (7件)

すべて 2022 2021 その他

すべて 雑誌論文 (2件) (うち査読あり 2件) 学会発表 (4件) (うち国際学会 1件、 招待講演 1件) 備考 (1件)

  • [雑誌論文] 知識と話題の埋め込み表現に基づく質問生成と対話システムへの適用―料理嗜好インタビューシステムに向けて―2021

    • 著者名/発表者名
      曽 傑, 中野 有紀子
    • 雑誌名

      自然言語処理

      巻: 28 ページ: 598~631

    • DOI

      10.5715/jnlp.28.598

    • 査読あり
  • [雑誌論文] 性格特性を表現するエージェントジェスチャの生成2021

    • 著者名/発表者名
      中野 有紀子、大山 真央、二瓶 芙巳雄、東中 竜一郎、石井 亮
    • 雑誌名

      ヒューマンインタフェース学会論文誌

      巻: 23 ページ: 153~164

    • DOI

      10.11184/his.23.2_153

    • 査読あり
  • [学会発表] Predicting Persuasiveness of Participants in Multiparty Conversations2022

    • 著者名/発表者名
      Atsushi Ito, Yukiko I. Nakano, Fumio Nihei, Tatsuya Sakato, Ryo Ishii, Atsushi Fukayama, and Takao Nakamura
    • 学会等名
      27th International Conference on Intelligent User Interfaces (IUI '22 Companion).Association for Computing Machinery, New York, NY, USA, 85-88. DOI:https://doi.org/10.1145/3490100.3516466
    • 国際学会
  • [学会発表] 社会的信号処理に基づくコミュニケーション支援2022

    • 著者名/発表者名
      中野有紀子
    • 学会等名
      日本動機づけ面接協会(JAMI)第10回大会,2022/3/12.(招待講演)
    • 招待講演
  • [学会発表] マルチモーダル情報に基づく相槌的応答と表情強度の推定2021

    • 著者名/発表者名
      上野諒祐,坂戸達陽,中野有紀子
    • 学会等名
      2021年度人工知能学会全国大会(第35回)E2-OS-5b-01,2021/6/8. 【全国大会優秀賞】
  • [学会発表] グループディスカッションにおける説得力の推定2021

    • 著者名/発表者名
      伊藤温志,坂戸達陽,中野有紀子
    • 学会等名
      2021年度人工知能学会全国大会(第35回)3E2-OS-5b-02,2021/6/8
  • [備考] 成蹊大学知的インタフェース研究室

    • URL

      https://iui.ci.seikei.ac.jp/

URL: 

公開日: 2023-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi