音声認識を用いた日本語自律学習システムの開発

• Project/Area Number: 12040211
• Research Category: Grant-in-Aid for Scientific Research on Priority Areas (A)
• Allocation Type: Single-year Grants
• Review Section: Humanities and Social Sciences
• Research Institution: Tokyo Institute of Technology
• Principal Investigator: 古井 貞煕 東京工業大学, 大学院・情報理工学研究科, 教授 (90293076)
• Co-Investigator(Kenkyū-buntansha): 廣瀬 幸夫 東京工業大学, 留学生センター, 教授 (80313378)
• Project Period (FY): 2000
• Project Status: Completed (Fiscal Year 2000)
• Budget Amount: ¥1,900,000 (Direct Cost: ¥1,900,000); Fiscal Year 2000: ¥1,900,000 (Direct Cost: ¥1,900,000)
• Keywords: 日本語自律学習システム / 音声認識 / 音素単位 / 音響スコア / 正規化スコア

Research Abstract

日本語学習者が好きな場所、時間で独習できる日本語自律学習システムの開発を目指して、研究を進めた。日本語学習者が発声した音声中の、日本語の発声として正しくない音素や音節、発声方法を、日本語教育専門家が対面指導するときと同様に、音声認識技術を用いて自動的に抽出し指導するシステムの構築を目的としている。
今年度は、日本語として正しくない音素毎の発声についての判定手法を検討した。日本語学習者の発声に対し、発声原稿を用いて認識用発音辞書とその単語系列のみを許す言語モデルを生成した。これを音声認識システムに与えることにより、音声の音素単位でのセグメンテーションを行なった。その認識処理結果として得られる音響スコアを用いることにより、日本語発声の音素単位での判定を行なった。判定には、日本語学習者の音響スコアを日本人話者の音響スコアで正規化したスコアを用いた。まず1音素毎の日本語学習者の音響スコアを各音素で平均化して、各音素のスコアを計算した。それを日本人話者の各音素のスコアと比較することにより、日本語として正しくない音素を検出した。その結果、専門家による指摘との相関がみられ、特に日本語発声が苦手な話者にはその傾向が強く表れている。
この手法により、発声終了後の専門家の指摘と同じように、日本語として正しくない音素を日本語学習者に提示することができ、日本語学習者へのフィードバック機能が実現できる。しかし、専門家による音素ごとの改善すべき発声の指摘と、音声認識システムの音響スコアによる指摘との間にはまだずれがあるので、この一致度を向上させるための研究を進めている。