• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2018 Fiscal Year Annual Research Report

A talking robot having human-like brain functions for autonomous voice learning and its application to a vocal articulation simulator

Research Project

Project/Area Number 15K01459
Research InstitutionWaseda University

Principal Investigator

澤田 秀之  早稲田大学, 理工学術院, 教授 (00308206)

Project Period (FY) 2015-04-01 – 2019-03-31
Keywords知能ロボット / ソフトロボット / 人工知能 / 音声生成 / 聴覚フィードバック / 脳内ネットワーク / 音声認識 / 発声障害
Outline of Annual Research Achievements

本研究において、人間と同等の発声器官をエアポンプ、人工声帯、声道共鳴管、音響アナライザなどを用いて全て機械的に構成し、聴覚フィードバック学習によって自律的に音声を獲得、生成することができる発話ロボットを構築した。特に声道部は柔らかいシリコーンゴムを用いており、これを柔軟に制御することによって特定の音響を生成できることを示し、ソフトロボット構築の観点からその有効性を考察した。
最終年度は、機械式発話システムが聴覚フィードバックによる模倣学習によって音声を獲得する課程について、人間の脳機能を再現した学習モデルを構築し、その有効性を検証した。小脳、皮質視床、大脳基底核から成る、音声の聴覚フィードバック学習の脳内ネットワークに着目し、これを計算機モデルとしてFPGAに実装した。小脳は、脳内において知覚と運動機能の統合を行う機能を司り、音声の生成においては聴覚から得られる音声知覚情報を元に、発話器官の動作生成をおこなうための制御信号を作り出している。そこで、発話タイミングの認知と生成に着目し、小脳ネットワークの計算機モデルを構築した。本モデルは、人間の発話から、その発話速度発話長および各音素の発声タイミング、抑揚を認識し、ニューロネットワークの発火パターンからロボットの発話制御信号を自動生成するものである。人間との音声対話実験において、人の発話速度、抑揚を認識し、それに応じて適応的に同様の発話速度と発話長、抑揚を持つ音声を作り出すことが可能となった。更に脳内ネットワークの大規模化を進め、話者の個人性の表出や、声真似、多言語の特徴的音響の再現など、より高精度に人の発話を再現できることを確認した。また、発話障がい患者の音声特徴をロボットに再現させることにより、その原因を、構音動作と脳障害の両面から特定するためのロボットシミュレータの開発もおこなった。

  • Research Products

    (5 results)

All 2019 2018 Other

All Int'l Joint Research (1 results) Journal Article (2 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 2 results) Book (1 results) Remarks (1 results)

  • [Int'l Joint Research] The University of Danang(ベトナム)

    • Country Name
      VIET NAM
    • Counterpart Institution
      The University of Danang
  • [Journal Article] Intoning Speech Performance of the Talking Robot for Vietnamese Language Case2018

    • Author(s)
      Thanh Vo Nhu and Hideyuki Sawada
    • Journal Title

      Proc. of International Symposium on Micro-NanoMechatronics and Human Science

      Volume: MHS2018 Pages: 160-163

    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Development of Vietnamese Voice Chatbot with Emotion Expression2018

    • Author(s)
      Thanh Vo Nhu and Hideyuki Sawada
    • Journal Title

      Proc. of International Symposium on Micro-NanoMechatronics and Human Science

      Volume: MHS2018 Pages: 22-27

    • Peer Reviewed / Int'l Joint Research
  • [Book] 日本機械学会誌「運動パターンを創り出すマテリアルと知能の設計」2019

    • Author(s)
      前田真吾, 澤田秀之, 重宗宏毅, 三輪貴信
    • Total Pages
      2
    • Publisher
      一般社団法人日本機械学会
    • ISBN
      0021-4728
  • [Remarks] 早稲田大学 澤田研究室

    • URL

      http://www.sawada.phys.waseda.ac.jp/

URL: 

Published: 2019-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi