対人恐怖症患者に対話継続を促す診察支援ロボットの開発

• Project Area: Studies on intelligent systems for dialogue toward the human-machine symbiotic society
• Project/Area Number: 22H04874
• Research Category: Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area)
• Allocation Type: Single-year Grants
• Review Section: Complex systems
• Research Institution: Nagasaki University
• Principal Investigator: 熊崎 博一 長崎大学, 医歯薬学総合研究科(医学系), 教授 (70445336)
• Project Period (FY): 2022-04-01 – 2024-03-31
• Project Status: Completed (Fiscal Year 2023)
• Budget Amount: ¥11,570,000 (Direct Cost: ¥8,900,000、Indirect Cost: ¥2,670,000); Fiscal Year 2023: ¥5,850,000 (Direct Cost: ¥4,500,000、Indirect Cost: ¥1,350,000); Fiscal Year 2022: ¥5,720,000 (Direct Cost: ¥4,400,000、Indirect Cost: ¥1,320,000)
• Keywords: 対人緊張症 / 機会学習 / アンドロイドロボット / 対人恐怖症 / ロボット / アンドロイド / 自己開示 / 感情 / 感覚回避 / 対話 / 個別化

Outline of Research at the Start

本研究では、長期的に、対人恐怖症者と面接を行うことが可能なロボットを開発することが目的となる。本研究で開発するロボットは、会話の音量・スピード・語尾、及び視線、瞬き、頷き、口の動きなどのノンバーバルな表出は自律動作にて行う。対人恐怖症者の個性を考慮し、また感情の変化を推定して、表情・動作をタイミングよく自律的に調整できる診察支援ロボットの開発が目標となる。そのうえで開発したロボットを用いて、対人恐怖症者が面接時に心地よく継続的に対話できることを示すことが最終的な目標となる。

Outline of Annual Research Achievements

25名の対人緊張症参加者（男性22名、女性3名、平均年齢22.8歳、平均IQ94.04）がアンドロイドロボットとの対話実験に参加した。参加者は、面接官役のアンドロイドとテーブルを挟んで座った。各参加者は模擬面接を受けたマルチモーダルデータ（音声、動作、視線、自記式質問票データなど）を収集し、アンドロイドロボットによる面接時に対人緊張者の状態を正しく分類するモデルを訓練した。尚,自己記入式質問紙にはThe Japanese Adult Reading Test (JART), LSAS－J（Liebowitz Social Anxiety Scale 日本語版）, 自閉症スペクトラム指数 (AQ),Sensory Profile(SP)を用いた. 我々は,マルチモーダルデータに基づき,ロボットが対人緊張者の感情を知覚することを可能にする機会学習（Machine Learning: ML）の技術的実現可能性を実証した。合計25サンプルについて, 行動測定値とアノテーションされた情動状態の特徴ベクトル893セットが得られ, これを用いて推定モデルを構築した. 使用した変数に基づくモデルの精度を評価するために, 機械学習で慣用的に使用されている5重交差検証パラダイムを採用した. 自己記入式質問紙データを活用することで, 覚醒度、快不快, エンゲージメントの推定性能が向上することがわかった. この結果は, 自己記入式質問票データの評価が, 対人緊張者がアンドロイドロボットによる面接を受ける際に, 個人の感情状態やエンゲージメントの自動推定の開発に貢献できることが明らかになった.

Research Progress Status

令和5年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和5年度が最終年度であるため、記入しない。

Research Products

• [Int'l Joint Research] ヴァンダービルト大学(米国)
• [Int'l Joint Research] ロレーヌ大学(フランス)
• [Journal Article] Self-administered questionnaires enhance emotion estimation of individuals with autism spectrum disorders in a robotic interview setting (2024)
  • Author(s): Konishi Shunta、Kuwata Masaki、Matsumoto Yoshio、Yoshikawa Yuichiro、Takata Keiji、Haraguchi Hideyuki、Kudo Azusa、Ishiguro Hiroshi、Kumazaki Hirokazu
  • Journal Title: Frontiers in Psychiatry Volume: 15 Pages: 1249000-1249000
  • DOI: 10.3389/fpsyt.2024.1249000
  • Peer Reviewed / Open Access
• [Journal Article] Development of depression assessment tools using humanoid robots -Can tele-operated robots talk with depressive persons like humans? (2024)
  • Author(s): Matsushima Toshio、Yoshikawa Yuichiro、Matsuo Keitaro、Kurahara Keita、Uehara Youki、Nakao Tomohiro、Ishiguro Hiroshi、Kumazaki Hirokazu、Kato Takahiro A.
  • Journal Title: Journal of Psychiatric Research Volume: 170 Pages: 187-194
  • DOI: 10.1016/j.jpsychires.2023.12.014
  • Peer Reviewed
• [Journal Article] Therapeutic Potential of Robots for People Who Stutter: A Preliminary Study (2024)
  • Author(s): Yuichiro Yoshikawa, Hiroaki Kobayashi, Naomi Sakai, Hiroshi Ishiguro and Hirokazu Kumazaki
  • Journal Title: Frontiers in Psychiatry Volume: 15 Pages: 1-12
  • DOI: 10.3389/fpsyt.2024.1298626
  • Peer Reviewed / Open Access
• [Journal Article] コミュニケーションロボットによるひきこもり・うつ病の早期支援 (2024)
  • Author(s): 松島敏夫, 吉川雄一郎, 熊崎博一, 加藤 隆弘.
  • Journal Title: 精神障害とリハビリテーション Volume: 27 Pages: 165-171
• [Journal Article] 精神科領域におけるロボット治療開発 (2024)
  • Author(s): 熊崎博一.吉川雄一郎
  • Journal Title: 臨床精神薬理 Volume: 27 Pages: 45-52
• [Journal Article] Differences in stakeholders’ expectations of gendered robots in the field of psychotherapy: an exploratory survey (2023)
  • Author(s): Nomura Tatsuya、Suzuki Tomohiro、Kumazaki Hirokazu
  • Journal Title: AI & SOCIETY Volume: 10 Issue: 6 Pages: 1-8
  • DOI: 10.1007/s00146-023-01787-x
  • Peer Reviewed / Open Access
• [Journal Article] Effect of attentive listening robot on pleasure and arousal change in psychiatric daycare (2023)
  • Author(s): Ochi Keiko、Inoue Koji、Lala Divesh、Kawahara Tatsuya、Kumazaki Hirokazu
  • Journal Title: Advanced Robotics Volume: 37 Issue: 21 Pages: 1382-1391
  • DOI: 10.1080/01691864.2023.2257264
  • Peer Reviewed
• [Journal Article] Social skills training using multiple humanoid robots for individuals with autism spectrum conditions (2023)
  • Author(s): Takata Keiji、Yoshikawa Yuichiro、Muramatsu Taro、Matsumoto Yoshio、Ishiguro Hiroshi、Mimura Masaru、Kumazaki Hirokazu
  • Journal Title: Frontiers in Psychiatry Volume: 14 Pages: 1168837-1168837
  • DOI: 10.3389/fpsyt.2023.1168837
  • Peer Reviewed / Open Access
• [Journal Article] A new group-based online job interview training program using computer graphics robots for individuals with autism spectrum disorders (2023)
  • Author(s): Yoshikawa Yuichiro、Muramatsu Taro、Sakai Kazuki、Haraguchi Hideyuki、Kudo Azusa、Ishiguro Hiroshi、Mimura Masaru、Kumazaki Hirokazu
  • Journal Title: Frontiers in Psychiatry Volume: 14 Pages: 1-10
  • DOI: 10.3389/fpsyt.2023.1198433
  • Peer Reviewed / Open Access
• [Journal Article] Android robot was beneficial for communication rehabilitation in a patient with schizophrenia comorbid with autism spectrum disorders (2023)
  • Author(s): Kumazaki Hirokazu、Muramatsu Taro、Yoshikawa Yuichiro、Matsumoto Yoshio、Ishiguro Hiroshi、Mimura Masaru
  • Journal Title: Schizophrenia Research Volume: 254 Pages: 116-117
  • DOI: 10.1016/j.schres.2023.02.009
  • Peer Reviewed
• [Journal Article] Differences in the Optimal Motion of Android Robots for the Ease of Communications Among Individuals With Autism Spectrum Disorders (2022)
  • Author(s): Kumazaki Hirokazu、Muramatsu Taro、Yoshikawa Yuichiro、Matsumoto Yoshio、Kuwata Masaki、Takata Keiji、Ishiguro Hiroshi、Mimura Masaru
  • Journal Title: Frontiers in Psychiatry Volume: 13 Pages: 883771-883771
  • DOI: 10.3389/fpsyt.2022.883371
  • Peer Reviewed / Open Access
• [Journal Article] Android Robot Promotes Disclosure of Negative Narratives by Individuals With Autism Spectrum Disorders (2022)
  • Author(s): Kumazaki Hirokazu、Muramatsu Taro、Yoshikawa Yuichiro、Matsumoto Yoshio、Takata Keiji、Ishiguro Hiroshi、Mimura Masaru
  • Journal Title: Frontiers in Psychiatry Volume: 13 Pages: 899664-899664
  • DOI: 10.3389/fpsyt.2022.899664
  • Peer Reviewed / Open Access
• [Journal Article] Intervention with a humanoid robot avatar for individuals with social anxiety disorders comorbid with autism spectrum disorders (2022)
  • Author(s): Yoshida Atsushi、Kumazaki Hirokazu、Muramatsu Taro、Yoshikawa Yuichiro、Ishiguro Hiroshi、Mimura Masaru
  • Journal Title: Asian Journal of Psychiatry Volume: 78 Pages: 103315-103315
  • DOI: 10.1016/j.ajp.2022.103315
  • Peer Reviewed / Open Access
• [Presentation] Development of a Group-Based Job Interview Training Program with 3D Computer Graphic Humanoid Robots for Individuals with Autism Spectrum Disorders. (2023)
  • Author(s): Yuichiro Yoshikawa, Hirokazu. Kumazaki, Taro. Muramatsu, Kazuki. Sakai, Hideyuki. Haraguchi, Azusa. Kudo, Hiroshi. Ishiguro.
  • Organizer: International Society for Autism Research (INSAR).
  • Int'l Joint Research
• [Presentation] 精神医学領域におけるヒューマノイドロボット診療の潜在性. (2023)
  • Author(s): 熊崎博一
  • Organizer: 第108回鹿児島精神神経学会.
  • Invited
• [Presentation] ヒューマノイドロボットを用いたギフテッド者への支援. (2023)
  • Author(s): 熊崎博一
  • Organizer: 第119回日本精神神経学会学術総会.
• [Presentation] 精神科デイケアのための傾聴対話システム：きくロボ (2023)
  • Author(s): 越智景子, 井上昂治,ディべッシュ・ララ, 河原達也, 熊崎博一.
  • Organizer: 人工知能学会 言語・音声理解と対話処理研究会（SLUD）第99回研究会.
• [Presentation] ASD 児を対象とした対話ロボットプログラミングワークショップの試み. (2023)
  • Author(s): 小西隼太, 飯森優斗, 鍬田雅輝, 松本吉央, 吉川雄一郎, 熊﨑博一, 伊藤寛晃.
  • Organizer: 第41回 日本ロボット学会学術講演会
• [Presentation] ロボットによるカウンセリングは受け入れられるか―日中米3カ国の比較による検討―. (2023)
  • Author(s): 鈴木公啓, 野村竜也, 熊崎博一.
  • Organizer: 日本パーソナリティ心理学会第32回大会.
• [Presentation] 人型ロボットのカウンセリング場面への応用に対する態度. (2022)
  • Author(s): 野村竜也, 鈴木公啓, 熊﨑博一.
  • Organizer: 日本パーソナリティ心理学会第31回大会.
• [Presentation] ナイト・ケアでロボットが与える心理的安心感. (2022)
  • Author(s): 岩田遼, 熊﨑博一, 茅野分, 藤井千代, 吉川雄一郎, 三村將.
  • Organizer: 第118回日本精神神経学会学術総会.
• [Presentation] 特別支援教育におけるヒューマノイドロボットと自閉スペクトラム症者の共生. (2022)
  • Author(s): 熊﨑博一, 吉川雄一郎, 松本吉央.
  • Organizer: 第36回人工知能学会全国大会.