2015 Fiscal Year Research-status Report
単一試行脳波を利用したサイレントスピーチ認識システム－連続音声認識への拡張－
| Project/Area Number |
15K00276
|
|---|
| Research Institution | Kyushu Institute of Technology |
|---|
Principal Investigator |
山崎 敏正 九州工業大学, 大学院情報工学研究院, 教授 (50392163)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
井上 勝裕 九州工業大学, 大学院情報工学研究院, 教授 (00150516)
齊藤 剛史 九州工業大学, 大学院情報工学研究院, 准教授 (10379654)
|
|---|
| Project Period (FY) |
2015-04-01 – 2018-03-31
|
| Keywords | SSRS / 単一試行脳波 / 運動準備電位 / Kalman filter / HMM |
|---|
| Outline of Annual Research Achievements |
脳波を利用したサイレントスピーチ認識システム（SSRS）において、SS時の脳波から、発話時の脳波と同じ成分（運動準備電位、BP）を発見した（世界初）。BPに注目すれば、他のタスクによるBCIの開発が可能。頭皮脳波からサイレント母音の認識に成功（健常者10名で認識率100％）。頭皮脳波からサイレント子音の認識に成功。母音認識器と子音認識器の組み合わせにより、将来、すべてのサイレントひらがな50音を認識できる。
ロボットや車椅子などの機械操作に加えて、障害者や高齢者との意思疎通が可能。
国内（テレビ局（NHK,FBS福岡放送など）、出版社（小学館）、新聞社）はもとより、海外メディア（Quartz, Daily Mail online newspaper, Radio Sputnik World Serviceなど）からも問い合わせ多数。後者がきっかけで、本を出版。読売新聞（朝刊）、西日本新聞（朝刊、1面）に掲載。脳障害者からの問い合わせもあった。
|
| Current Status of Research Progress |
Current Status of Research Progress
1: Research has progressed more than it was originally planned.
Reason
サイレントシーズン認識において、当初、「はる」と「なつ」のみだったが、残り「あき」、「ふゆ」も含めて、認識率がそれぞれ91％、89％、75％、100％に到達した。
英語論文（Journal of Computer Science and Systems Biology, vol.8(5), pp.285-291, 2015)のacceptだけでなく、2016年初めに「Silent Speech Brain-Computer Interface in Japanesere」と題する本がLAMBERT Academic Publishingから出版された。
|
| Strategy for Future Research Activity |
日本語ひらがなを構成するすべてのサイレント子音の認識に挑戦。
実用化の観点から、あらかじめ何がサイレントスピーチされたか分からない場合の認識、音声信号データベースの活用を試みる。
学習アルゴリズムとして、deep learningなどの応用を検討する。
|
