Development of the real-time speech visualization system for language acquisition

• Project/Area Number: 19700641
• Research Category: Grant-in-Aid for Young Scientists (B)
• Allocation Type: Single-year Grants
• Research Field: Educational technology
• Research Institution: Kumamoto University
• Principal Investigator: SAKATA Tadashi Kumamoto University, 大学院・自然科学研究科, 助教 (80336205)
• Co-Investigator(Renkei-kenkyūsha): UEDA Yuichi 熊本大学, 大学院・自然科学研究科, 教授 (00141961)
• Project Period (FY): 2007 – 2008
• Project Status: Completed (Fiscal Year 2008)
• Budget Amount: ¥3,460,000 (Direct Cost: ¥3,100,000、Indirect Cost: ¥360,000); Fiscal Year 2008: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000); Fiscal Year 2007: ¥1,900,000 (Direct Cost: ¥1,900,000)
• Keywords: 教育工学 / 可視化 / 音声学 / 外国語発話訓練 / 画像化音声 / 日本語特殊拍 / 発話速度 / プロソディ / ニューラルネット

Research Abstract

パソコン用アプリケーションとしてリアルタイム動作する発話訓練システムを開発し,訓練システムにおいて言語特有の音素特徴を画像情報に変換するために必要であるニューラルネットワーク(NN)構築を行った。日本語用NNを用い,日本語非母語話者による訓練システムの評価を行った。さらに,発話において重要なイントネーションや発話速度などの情報を付加するため,それらのリアルタイム推定について検討し,システムの発展性について検討を行った。

Research Products

• [Presentation] 発話学習のためのプロソディ特徴量リアルタイム推定法 (2009)
  • Author(s): 坂田聡
  • Organizer: 日本音響学会2009年春季研究発表会
  • Place of Presentation: 東京工業大学
  • Year and Date: 2009-03-19
• [Presentation] 発話学習のためのプロソディ特徴量のリアルタイム推定法 (2009)
  • Author(s): 坂田聡
  • Organizer: 日本音響学会2009年春季研究発表会
  • Place of Presentation: 東京工業大学
  • Year and Date: 2009-03-19
• [Presentation] 音声画像フィードバックを用いた外国人学習者による日本語特殊拍の習得 (2008)
  • Author(s): 米倉達郎
  • Organizer: 日本音響学会2008年秋季研究発表会
  • Place of Presentation: 九州大学
  • Year and Date: 2008-09-10
• [Presentation] 外国語発話訓練システムの画像化音声生成に用いるニューラルネットの検討 (2008)
  • Author(s): 坂田聡
  • Organizer: 日本音響学会2008年春季研究発表会
  • Place of Presentation: 千葉工業大学
  • Year and Date: 2008-03-19