• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

相互注視成立判定方式の確立と会話エージェントへの応用

公募研究

研究領域学際的研究による顔認知メカニズムの解明
研究課題/領域番号 23119721
研究種目

新学術領域研究(研究領域提案型)

配分区分補助金
審査区分 複合領域
研究機関成蹊大学

研究代表者

中野 有紀子  成蹊大学, 理工学部, 教授 (40422505)

研究期間 (年度) 2011-04-01 – 2013-03-31
研究課題ステータス 完了 (2012年度)
配分額 *注記
6,760千円 (直接経費: 5,200千円、間接経費: 1,560千円)
2012年度: 3,380千円 (直接経費: 2,600千円、間接経費: 780千円)
2011年度: 3,380千円 (直接経費: 2,600千円、間接経費: 780千円)
キーワード視線 / 相互注視 / 会話エージェント / 優位性推定 / 表情 / コミュニケーション障害
研究実績の概要

1.視線,音声情報からの会話における優位性推定
複数人からなるグループユーザに対応する会話エージェントシステムでは,ユーザ同士の会話の様子を自動認識することが重要である.本研究では,音声と視線による非言語情報からユーザ同士の会話における会話参加者の優位性を自動推定する方式を考案した.まずWizard-of-Oz手法を用いた会話エージェントと3人の被験者との会話収集実験を行い,音声とモーションキャプチャによる注視方向データを収集し,注視・相互注視情報と,発話時間や発話権取得についての音声情報から会話参加者の優位性の推定を行うための重回帰モデルを作成した.その結果重相関係数が0.85となり,会話における優位性の高い人物を特定するのに十分な精度が得られた.

2.複数人対応会話エージェントにおける受話者推定機構の構築
人とエージェントとの複数人会話において,エージェントが応答すべき時に的確に応答するには,ユーザの発話が誰に向けられているのかを判断する機能が不可欠である.本研究では,ユーザの音声情報と頭部方向情報を用いて受話者を推定する方式を考案した.音声情報・頭部方向情報と受話者との相関関係の分析を行った結果,ユーザはエージェントに対して話している時は,より高く,大きい声で,ゆっくりと話すことが分かった.また,もう一人のユーザが受話者である時は,33.5%の時間しか,受話者を見ていないことがわかった.これにより,ユーザは頻繁に受話者を見るが,頭部方向情報のみでは受話者を推定することが困難であることが分かった.これらの分析結果に基づき,音声情報と頭部方向情報を統合し,SVMによる受話者推定モデルを構築し,さらにリアルタイムで動作する受話者推定システムを構築し,評価実験を実施したところ,不正な音声入力を除いた場合には, 80%以上の分類精度が得られた.

現在までの達成度 (段落)

24年度が最終年度であるため、記入しない。

今後の研究の推進方策

24年度が最終年度であるため、記入しない。

報告書

(2件)
  • 2012 実績報告書
  • 2011 実績報告書
  • 研究成果

    (27件)

すべて 2013 2012 2011 その他

すべて 雑誌論文 (4件) (うち査読あり 4件) 学会発表 (18件) 図書 (3件) 備考 (2件)

  • [雑誌論文] 人対会話エージェントとの多人数会話における頭部方向と音声情報を用いた受話者推定機構2013

    • 著者名/発表者名
      馬場直哉,黄 宏軒,中野有紀子
    • 雑誌名

      人工知能学会論文誌

      巻: 28 ページ: 149-159

    • NAID

      130003362320

    • 関連する報告書
      2012 実績報告書
    • 査読あり
  • [雑誌論文] Gaze Awareness in Conversational Agents: Estimating User's Conversational Engagement from Eye-Gaze2013

    • 著者名/発表者名
      Ishii, R., Nakano, Y. I., and Nishida, T.
    • 雑誌名

      The ACM Transactions on Interactive Intelligent Systems (TiiS)

      巻: 3

    • 関連する報告書
      2012 実績報告書
    • 査読あり
  • [雑誌論文] メタバースにおける言語・空間情報に基づくアバタへの道案内ジェスチャの自動付与2012

    • 著者名/発表者名
      塚本 剛生,中野 有紀子
    • 雑誌名

      日本バーチャルリアリティ学会論文誌

      巻: 17 ページ: 79-89

    • 関連する報告書
      2012 実績報告書
    • 査読あり
  • [雑誌論文] 視線と頭部動作に基づくユーザの会話参加態度の推定2011

    • 著者名/発表者名
      石井亮, 大古亮太, 中野有紀子, 西田豊明
    • 雑誌名

      情報処理学会論文誌

      巻: 52-12 ページ: 3625-3636

    • NAID

      110008719939

    • 関連する報告書
      2011 実績報告書
    • 査読あり
  • [学会発表] Estimating Conversational Dominance in Multiparty Interaction2012

    • 著者名/発表者名
      Yukiko I. Nakano, Yuki Fukuhara
    • 学会等名
      14th ACM International Conference on Multimodal Interaction (ICMI2012)
    • 発表場所
      USA, California
    • 年月日
      2012-10-23
    • 関連する報告書
      2012 実績報告書
  • [学会発表] Towards Assessing the Communication Responsiveness of People with Dementia2012

    • 著者名/発表者名
      Yuuko Nonaka, Yoichi Sakai, Kiyoshi Yasuda, Yukiko I. Nakano
    • 学会等名
      the 12th International Conference on Intelligent Virtual Agents (IVA 2012)
    • 発表場所
      USA, California
    • 年月日
      2012-09-12
    • 関連する報告書
      2012 実績報告書
  • [学会発表] 高齢者の会話における反応性の定量化と可視化2012

    • 著者名/発表者名
      野中 裕子, 酒井 洋一, 安田 清, 中野 有紀子
    • 学会等名
      26 回人工知能学会全国大会
    • 発表場所
      山口県
    • 年月日
      2012-06-12
    • 関連する報告書
      2012 実績報告書
  • [学会発表] 認知症患者のコミュニケーション特性の評定における会話エージェントの利用2012

    • 著者名/発表者名
      酒井洋一, 野中裕子, 安田清, 中野有紀子
    • 学会等名
      第74回情報処理学会全国大会
    • 発表場所
      名古屋工業大学
    • 年月日
      2012-03-07
    • 関連する報告書
      2011 実績報告書
  • [学会発表] Listener agent for elderly people with dementia2012

    • 著者名/発表者名
      Yoichi Sakai, Yuuko Nonaka, Kiyoshi Yasuda, Yukiko I.Nakano
    • 学会等名
      the seventh annual ACM/IEEE international conference on Human-Robot Interaction (HRI2012)
    • 発表場所
      Boston, USA
    • 年月日
      2012-03-06
    • 関連する報告書
      2011 実績報告書
  • [学会発表] Referent identification process in human-robot multimodal communication2012

    • 著者名/発表者名
      Yuta Shibasaki, Takahiro Inaba, Yukiko I.Nakano
    • 学会等名
      the seventh annual ACM/IEEE international conference on Human-Robot Interaction (HRI2012)
    • 発表場所
      Boston, USA
    • 年月日
      2012-03-06
    • 関連する報告書
      2011 実績報告書
  • [学会発表] 複数ユーザ対会話エージェントとの多人数インタラクションにおける優位性の自動推定方法2012

    • 著者名/発表者名
      福原佑貴, 中野有紀子
    • 学会等名
      第74回情報処理学会全国大会
    • 発表場所
      名古屋工業大学
    • 年月日
      2012-03-06
    • 関連する報告書
      2011 実績報告書
  • [学会発表] Addressee identification for human-human-agent multiparty conversations in different proxemics2012

    • 著者名/発表者名
      Naoya Baba, Hung-Hsuan Huang, Yukiko I. Nakano
    • 学会等名
      4th Workshop on Eye Gaze in Intelligent Human Machine Interaction
    • 発表場所
      USA, California
    • 関連する報告書
      2012 実績報告書
  • [学会発表] グループ会話対応型会話エージェントにおける受話者推定システム2011

    • 著者名/発表者名
      馬場直哉, 黄宏軒, 中野有紀子
    • 学会等名
      HAIシンポジウム2011
    • 発表場所
      京都工芸繊維大学
    • 年月日
      2011-12-03
    • 関連する報告書
      2011 実績報告書
  • [学会発表] Making a Virtual Conversational Agent be Aware of the Addressee of Users' Utterances in Multi-user Conversation from Nonverbal Information2011

    • 著者名/発表者名
      Hung-Hsuan Huang, Naoya Baba, Yukiko Nakano
    • 学会等名
      the 13th International Conference on Multimodal Interaction (ICMI2011)
    • 発表場所
      Alicante, Spain
    • 年月日
      2011-11-16
    • 関連する報告書
      2011 実績報告書
  • [学会発表] Identifying Utterances Addressed to an Agent in Multiparty Human-Agent Conversations2011

    • 著者名/発表者名
      Naoya Baba, Hung-Hsuan Huang, Yukiko I.Nakano
    • 学会等名
      the 11th International Conference on Intelligent Virtual Agents (IVA2011)
    • 発表場所
      Reykjavik, Iceland
    • 年月日
      2011-09-16
    • 関連する報告書
      2011 実績報告書
  • [学会発表] Estimating a User's Conversational Engagement Based on Head Pose Information2011

    • 著者名/発表者名
      Ryota Ooko, Ryo Ishii, Yukiko I.Nakano
    • 学会等名
      the 11th International Conference on Intelligent Virtual Agents (IVA2011)
    • 発表場所
      Reykjavik, Iceland
    • 年月日
      2011-09-16
    • 関連する報告書
      2011 実績報告書
  • [学会発表] 会話エージェントによる認知症患者への語りかけの効果2011

    • 著者名/発表者名
      酒井洋一, 安田清, 中野有紀子
    • 学会等名
      第10回情報科学技術フォーラム(FIT2011)
    • 発表場所
      函館大学・函館短期大学
    • 年月日
      2011-09-09
    • 関連する報告書
      2011 実績報告書
  • [学会発表] ヒューマノイドロボットのジェスチャに対する人の注視行動の分析2011

    • 著者名/発表者名
      柴崎優太, 上出純平, 福原佑貴, 中野有紀子
    • 学会等名
      第10回情報科学技術フォーラム(FIT2011)
    • 発表場所
      函館大学・函館短期大学
    • 年月日
      2011-09-09
    • 関連する報告書
      2011 実績報告書
  • [学会発表] 人対エージェントの会話における頭部動作情報に基づくユーザ態度の推定2011

    • 著者名/発表者名
      大古亮太, 石井亮, 中野有紀子
    • 学会等名
      電子情報通信学会ヒューマンコミュニケーション基礎研究会(HCS)
    • 発表場所
      京都大学
    • 年月日
      2011-08-26
    • 関連する報告書
      2011 実績報告書
  • [学会発表] Effectiveness of remote assistance for people with dementia at home using reminiscence system and a schedule prompter2011

    • 著者名/発表者名
      Kiyoshi Yasuda
    • 学会等名
      Alzheimer's Association 2011 International Conference on Alzheimer's Disease (AAICAD)
    • 発表場所
      Paris, France
    • 年月日
      2011-07-20
    • 関連する報告書
      2011 実績報告書
  • [学会発表] コミュニケーションロボットにおけるジェスチャ表出の有効性2011

    • 著者名/発表者名
      福原佑貴, 上出純平, 中野有紀子
    • 学会等名
      第25回人工知能学会全国大会
    • 発表場所
      岩手県民情報交流センター
    • 年月日
      2011-06-02
    • 関連する報告書
      2011 実績報告書
  • [学会発表] 認知症患者のための語りかけエージェント2011

    • 著者名/発表者名
      中野有紀子, 比企野純太, 安田清
    • 学会等名
      第25回人工知能学会全国大会
    • 発表場所
      岩手県民情報交流センター
    • 年月日
      2011-06-01
    • 関連する報告書
      2011 実績報告書
  • [図書] 「顔研究から生まれるコミュニケーションシステム」,山口 真美 柿木 隆介 (編),顔を科学する -適応と障害の脳科学- 15章2013

    • 著者名/発表者名
      武川直樹・中野有紀子
    • 総ページ数
      352
    • 出版者
      東京大学出版会
    • 関連する報告書
      2012 実績報告書
  • [図書] Eye Gaze in Intelligent User Interfaces-Gaze-based Analyses, Models and Applications-2012

    • 著者名/発表者名
      Nakano, Y., Conati, C., Bader, T.
    • 総ページ数
      207
    • 出版者
      Springer
    • 関連する報告書
      2012 実績報告書
  • [図書] Intelligent Virtual Agents: 12th International Conference, IVA 20122012

    • 著者名/発表者名
      Yukiko Nakano, Michael Neff, Ana Paiva, Marilyn Walker
    • 総ページ数
      540
    • 出版者
      Springer
    • 関連する報告書
      2012 実績報告書
  • [備考] 成蹊大学 知的インタフェース研究室

    • URL

      http://iui.ci.seikei.ac.jp/

    • 関連する報告書
      2012 実績報告書
  • [備考]

    • URL

      http://www.ci.seikei.ac.jp/nakano/research2.html

    • 関連する報告書
      2011 実績報告書

URL: 

公開日: 2011-04-06   更新日: 2018-03-28  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi