• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2009 Fiscal Year Annual Research Report

聴覚障害が引き起こす音声の不明瞭要因の解析と対話型発話訓練ロボットの構築

Research Project

Project/Area Number 21500517
Research InstitutionKagawa University

Principal Investigator

澤田 秀之  Kagawa University, 工学部, 教授 (00308206)

Keywords発話訓練 / 発話ロボット / 聴覚障碍者 / 支援技術 / 音声 / 自己組織化ニューラルネットワーク / 聴覚フィードバック / 構音障碍
Research Abstract

発話動作をおこなう器官をエアポンプ、人工声帯、声道共鳴部、鼻腔部など、全て機械系によって構成した、ポータブルな発話ロボットの構築を進めた。また計算機による聴覚フィードバック制御によって、ロボットが自律的に発話動作を獲得し、任意の音声を生成することができる学習機構の実装をおこなった。発話ロボットは、声道部の断面形状を9個のモータにより変形させ、任意の共鳴特性を付加することによって音声を生成する。声道物理モデルの制御パラメータと、生成される音響パラメータとの対応付けを、聴覚フィードバックによる自律学習によって適応的に獲得させることにより、人間と同様な発話動作を再現することを可能とした。
ロボット声道部のモータ制御量と音響特徴パラメータを、柔軟かつ適応的に対応付け可能な、自己組織化ニューラルネットワーク(SONN)を提案した。自己組織化マップ(SOM)とNNの可塑性により、未学習の音響パターンに対しても、学習パターン対から獲得される入出力関係が反映された、モータ制御パラメータ値が得られることを示した。つまり、音響間の類似度がマップ上の距離情報として保持された、音素マップが自己組織的に作られることが実証できた。これにより、マップ上で同じ母音どうしが近接に纏まってクラスタを作り、また聴覚障碍者の不明瞭音声は、健聴者音声クラスタ域から外れて配置されることを確認した。不明瞭音声と、明瞭音声クラスタとの距離を元に「明瞭度尺度」を定義し、ロボットの発話動作との違いを示すことによって発話訓練をおこなうシナリオを構築した。次年度は、聴覚障碍者の協力を得て、ロボットとの対話による発話訓練実験をおこない、システムの有効性を確認していく。

  • Research Products

    (7 results)

All 2010 2009 Other

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (4 results) Book (1 results) Remarks (1 results)

  • [Journal Article] A Talking Robot and the Adaptive Learning of Speech Articulation Using 3D SOM2009

    • Author(s)
      Mitsuki Kitani, Tatsuya Hara, Hideyuki Sawada
    • Journal Title

      IEEE International Symposium on Biomedical Engineering (IEEE ISBME2009) (CD-ROM proceedings)

      Pages: WM1-1 #1042

    • Peer Reviewed
  • [Presentation] ロボットパフォーマンス「発話ロボット」2010

    • Author(s)
      澤田秀之
    • Organizer
      科学技術振興機構「科学と芸術の集い」ロボットアーティスト大集合
    • Place of Presentation
      サンポートホール高松 大ホール(香川)
    • Year and Date
      2010-02-21
  • [Presentation] 音響信号と画像信号の統合処理による特定音響の能動的センシング2009

    • Author(s)
      澤田秀之
    • Organizer
      計測自動制御学会 第10回システムインテグレーション部門講演会(SI2009)
    • Place of Presentation
      芝浦工業大学 豊洲キャンパス(東京都)
    • Year and Date
      20091224-20091226
  • [Presentation] Adaptive Learning of the Speech Articulation of a Talking Robot Using 3D SOM2009

    • Author(s)
      澤田秀之
    • Organizer
      電気関係学会 四国支部大会 講演論文集
    • Place of Presentation
      徳島大学(徳島県)
    • Year and Date
      2009-09-26
  • [Presentation] Invited Talk A Talking Robot and the Interactive Speech Training for Hearing-Impaired2009

    • Author(s)
      澤田秀之
    • Organizer
      General Meeting of the Acoustical Society of America
    • Place of Presentation
      Hilton Portland & Executive Tower, Oregon, USA
    • Year and Date
      2009-05-18
  • [Book] 「ロボット情報学ハンドブック」, ISBN:978-4764955073(松原仁, 松野文俊, 稲見昌彦, 野田五十樹, 大須賀公一, 編集)2010

    • Author(s)
      澤田秀之
    • Total Pages
      943
    • Publisher
      ナノオプトニクスエナジー
  • [Remarks]

    • URL

      http://www.eng.kagawa-u.ac.jp/~sawada/

URL: 

Published: 2011-06-16   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi