• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Developing a conversational robot that supports human emotional communication through drawings

Research Project

Project/Area Number 16K00355
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Research Field Intelligent robotics
Research InstitutionAkita Prefectural University

Principal Investigator

Dohsaka Kohji  秋田県立大学, システム科学技術学部, 教授 (70396191)

Project Period (FY) 2016-04-01 – 2021-03-31
Project Status Completed (Fiscal Year 2020)
Budget Amount *help
¥4,680,000 (Direct Cost: ¥3,600,000、Indirect Cost: ¥1,080,000)
Fiscal Year 2020: ¥390,000 (Direct Cost: ¥300,000、Indirect Cost: ¥90,000)
Fiscal Year 2019: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2018: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2017: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2016: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywords感情認識 / 感情強度認識 / 自然言語生成 / 要約生成 / 対話処理 / 対話システム / 会話ロボット / マルチモーダル / 機械学習 / マルチラベル分類 / 知能ロボット / 感情コミュニケーション
Outline of Final Research Achievements

In this research, we developed essential technologies for establishing a conversational robot that uses both pictures and language to activate human emotional communication and demonstrated the effectiveness of the conversational robot. As pictures, we used single-stroke drawings written to express emotions. We developed methods for recognizing the writer's emotion from both the drawings and the text, generating the rationale for emotional judgments, and recognizing the emotion intensity. Using these technologies, we conducted an experiment to measure the conversational robot's emotional communication activation effect. The experiment demonstrated that a conversational robot activated human emotional communication when it uttered empathic expressions containing the rationale for emotional judgments (e.g., "you are happy because you could see various scenery") rather than parroting human emotions.

Academic Significance and Societal Importance of the Research Achievements

人間は,言葉だけでなく表情・身振りなどの身体的表現,絵などの視覚的表現を使ってコミュニケーションを行う.従来の会話ロボット研究では,言語に加えて身体的な表現を使った研究が多くなされてきたが,本研究は絵という視覚的表現を使うことに特徴がある.絵は多くの人にとって感情を表すための身近な表現手段である.本研究では,複数の人間が絵と言葉を使って経験を語り合う場面で,会話ロボットが適切な共感を示すことによって,人間の感情コミュニケーションを活性化できることを示した.このことにより,会話ロボットが人間の感情表出を助け,心理セラピー効果をもたらし,社会交流活性化を通した認知症予防に寄与することが期待できる.

Report

(6 results)
  • 2020 Annual Research Report   Final Research Report ( PDF )
  • 2019 Research-status Report
  • 2018 Research-status Report
  • 2017 Research-status Report
  • 2016 Research-status Report
  • Research Products

    (11 results)

All 2021 2020 2019 2018 2017 2016

All Presentation (11 results) (of which Int'l Joint Research: 1 results)

  • [Presentation] Efficient Creation of Japanese Tweet Emotion Dataset Using Sentence-Final Expressions2021

    • Author(s)
      Tatsuki Akahori, Kohji Dohsaka, Masaki Ishii, Hidekatsu Ito
    • Organizer
      IEEE LIfetech2021
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] BERTを利用した感情生起要因推定手法の検討2020

    • Author(s)
      福田芳樹,堂坂浩二,石井雅樹,伊東嗣功
    • Organizer
      2020年度人工知能学会全国大会
    • Related Report
      2020 Annual Research Report
  • [Presentation] 感情強度辞書を利用した日本語ツイートの感情強度の推定2019

    • Author(s)
      赤堀 立樹, 堂坂 浩二, 伊東 嗣功, 石井 雅樹
    • Organizer
      感情強度辞書を利用した日本語ツイートの感情強度の推定
    • Related Report
      2019 Research-status Report
  • [Presentation] 感情強度辞書の感情強度推定への効果の検証2019

    • Author(s)
      赤堀立樹, 堂坂浩二, 伊東嗣功, 石井 雅樹,
    • Organizer
      2019年度電気関係学会東北支部大会
    • Related Report
      2019 Research-status Report
  • [Presentation] 文書と絵からの感情認識手法の検討,2019

    • Author(s)
      木下圭, 堂坂浩二, 石井雅樹, 伊東嗣功
    • Organizer
      2019年度電気関係学会東北支部大会
    • Related Report
      2019 Research-status Report
  • [Presentation] 文書と絵からの感情認識手法の開発2019

    • Author(s)
      木下圭, 堂坂浩二, 石井雅樹, 伊東嗣功
    • Organizer
      言語処理学会年次大会
    • Related Report
      2018 Research-status Report
  • [Presentation] 感情強度辞書を利用した日本語ツイートの感情強度の推定2019

    • Author(s)
      赤堀 立樹, 堂坂 浩二, 伊東 嗣功, 石井 雅樹
    • Organizer
      第33回人工知能学会大会 (in press)
    • Related Report
      2018 Research-status Report
  • [Presentation] 文書と絵の双方から感情認識2018

    • Author(s)
      木下圭, 堂坂浩二, 石井雅樹, 伊東嗣功
    • Organizer
      電気関係学会東北支部連合大会
    • Related Report
      2018 Research-status Report
  • [Presentation] 感情コミュニケーション支援のための絵からの感情認識2017

    • Author(s)
      鈴木哲司,村松嶺佑,堂坂浩二
    • Organizer
      2017年度人工知能学会大会
    • Related Report
      2017 Research-status Report
  • [Presentation] 感情極性の確率推定を用いたテキストからのマルチラベル感情認識2017

    • Author(s)
      村松嶺佑, 堂坂浩二,
    • Organizer
      第16回情報科学技術フォーラム(FIT2017)
    • Related Report
      2017 Research-status Report
  • [Presentation] 一筆書きの絵を対象とした感情判断理由の生成2016

    • Author(s)
      鈴木哲司,堂坂浩二
    • Organizer
      2016年度人工知能学会大会, 1B2-5
    • Place of Presentation
      北九州国際会議場、北九州市
    • Year and Date
      2016-06-06
    • Related Report
      2016 Research-status Report

URL: 

Published: 2016-04-21   Modified: 2022-01-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi