2016 Fiscal Year Annual Research Report
Integration of Event Related Brain Potentials into Speech Recognition Framework
| Project/Area Number |
26870371
|
|---|
| Research Institution | Nara Institute of Science and Technology |
|---|
Principal Investigator |
サクリアニ サクティ 奈良先端科学技術大学院大学, 情報科学研究科, 助教 (00395005)
|
|---|
| Project Period (FY) |
2014-04-01 – 2017-03-31
|
| Keywords | 音声認識 / 事象関連電位 / 脳波 |
|---|
| Outline of Annual Research Achievements |
本研究では、人間の知覚に基づき、脳活動計測の一種である事象関連電位（ERP）の研究をASR フレームワークに取り入れ、言語理解における人間の認知プロセスを分析し、自動音声認識(ASR) フレームワークで統合する可能性を検証しました:
（１）ERPによる日本語文での知識と意味のミスマッチ分析
（２）統計的ASRへの知識の統合
最初の年度は、（１）を中心に、研究をしました。特に，本研究では不全要因を（a） システム出力が誤りを含んでいた場合と(b) システム出力は正しいが，コミュニケーションが成立しない場合の２つの場面に分けて考えました．そのうち，前者の例としてASR誤りを，後者の例として未知語の出現を対象とし，それぞれの場面のEEGデータを分析し，コミュニケーション不全要因の検出を試みました．
今年はパート（1）を続け、（2）の研究にも焦点を当てました。近年の深層学習の進展と急速な進歩により、知識のASRへの統合のための深い学習を活用する様々なアプローチも検討しました。また、インドネシアとフランスの他のいくつかの研究機関と共同で共同ワークショップを開催するだけでなく、共同研究を行いました。
|
-
-
-
-
-
[Journal Article] Gated Recurrent Neural Tensor Network2016
Author(s)
Andros Tjandra, Sakriani Sakti, Ruli Manurung, Mirna Adriani, Satoshi Nakamura
-
Journal Title
Proceedings of The 2016 International Joint Conference on Neural Networks (IJCNN 2016)
Volume: Vol. 1
Pages: 448-456
DOI
Peer Reviewed / Int'l Joint Research / Acknowledgement Compliant
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
