• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2012 Fiscal Year Research-status Report

サイレントスピーチBCI

Research Project

Project/Area Number 23500151
Research InstitutionKyushu Institute of Technology

Principal Investigator

山崎 敏正  九州工業大学, 大学院情報工学研究院, 教授 (50392163)

Co-Investigator(Kenkyū-buntansha) 井上 勝裕  九州工業大学, 大学院情報工学研究院, 教授 (00150516)
前田 誠  九州工業大学, 大学院情報工学研究院, 助教 (00274556)
KeywordsBCI / サイレントスピーチ / Kalman filter / 運動準備電位 / 運動前野 / Broca野 / confusion matrix
Research Abstract

本研究では、サイレントスピーチを利用した単一試行脳波に基づく新しいBCI(SSBCI)を開発中である。このSSBCIは2つのフェーズ(learning phaseとdecoding phase)から構成され、learning phaseでは発話時の脳波と音声信号を利用し、decoding phaseではサイレントスピーチ時の脳波を利用している。これら両脳波の中に運動準備電位が含まれると仮定し、learning phaseでは、ICA後ECDLによって、運動野、運動前野あるいはBroca野にダイポールが推定された脳波成分と音声信号から、Kalman filterモデルを決定する。decoding phaseでは、発話に関係する領野、特に運動前野がホルマント周波数(F1とF2)をencodeしているという仮説(DIVA仮説)の下に、サイレントスピーチ時に計測された脳波で、そのECDL結果が運動野、運動前野、あるいはBroca野である脳波をKalman filterモデルに入力し、出力として音声信号(スペクトログラム)を予測している。今年度は、サイレント「グー」、「パー」、「チョキ」の正解を以下のように定め、サイレント「グー」、「パー」は勿論の事、本格的なサイレント「チョキ」の予測を試みた。サイレント「グー」ではKalman filter予測値がF1-F2平面上/u/領域を通れば、サイレント「パー」では/a/領域を通れば、サイレント「チョキ」では/o/領域、次に/i/領域を通れば、それぞれ正解とした。その結果、被験者1名ながらサイレント「チョキ」の予測に成功し、これら3予測器(サイレント「グー」、「パー」、「チョキ」)の性能がconfusion matrixによって実証された。さらに、子音識別を伴うサイレントスピーチの予測へ発展させるための脳波計測実験を開始した。

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

サイレント「グー」、「パー」、「チョキ」、すべての予測に成功し、これらの3予測器の性能を実証出来た。更に、子音識別を伴うサイレントスピーチBCIの研究を開始したから。

Strategy for Future Research Activity

被験者全員について、3予測器の性能を改善および実証する。

Expenditure Plans for the Next FY Research Funding

昨年度に続いて国内外での成果発表が中心となるので、そのための費用が主になる。また、脳波計測環境およびデータ解析環境の充実化もはかる。

  • Research Products

    (33 results)

All 2013 2012

All Journal Article (5 results) (of which Peer Reviewed: 5 results) Presentation (27 results) (of which Invited: 1 results) Book (1 results)

  • [Journal Article] Spatiotemporal human brain activities on recalling names of body parts2013

    • Author(s)
      T.Yamanoi et al.
    • Journal Title

      Journal of Advanced Computational Intelligence and Industrial Informatics

      Volume: 17 Pages: 印刷中

    • Peer Reviewed
  • [Journal Article] EEG pattern recognition based on frequency analysis during imaging and gazing tasks2013

    • Author(s)
      K.Kinoshita et al.
    • Journal Title

      Proc. of the 43rd ISCIE International Symposium on Stochastic Systems Theory and Its Applications

      Volume: なし Pages: 338,343

    • Peer Reviewed
  • [Journal Article] BCI by use of EEGs from right frontal area2012

    • Author(s)
      T.Yamanoi et al.
    • Journal Title

      Proc. SCIS-ISIS 2012

      Volume: なし Pages: 1150,1153

    • Peer Reviewed
  • [Journal Article] Morphological redundant wavelet analysis of vocal signal2012

    • Author(s)
      T.Yamaguchi et al.
    • Journal Title

      ICIC Express Letter

      Volume: 6 Pages: 983,989

    • Peer Reviewed
  • [Journal Article] A study of stimulation method in visual evoked potential based BCI2012

    • Author(s)
      T.Mizoguchi et al.
    • Journal Title

      Proc. of SICE Annual Conference 2012

      Volume: なし Pages: 2169,2174

    • Peer Reviewed
  • [Presentation] サイレントスピーチBCI-Single-trial EEGsを利用したサイレントジャンケンの予測-2013

    • Author(s)
      久野 他
    • Organizer
      電子情報通信学会 MEとバイオサイバネティックス研究会
    • Place of Presentation
      東京
    • Year and Date
      20130313-20130315
  • [Presentation] レム睡眠時の睡眠ポリグラフ解析2013

    • Author(s)
      高地、井上
    • Organizer
      電気学会研究会 産業計測制御・メカトロニクス制御・合同研究会
    • Place of Presentation
      千葉
    • Year and Date
      20130307-20130308
  • [Presentation] Bayesian Networkを利用した運動準備電位によるジャンケン動作予測2013

    • Author(s)
      杉本 他
    • Organizer
      電子情報通信学会 MEとバイオサイバネティックス研究会
    • Place of Presentation
      飯塚
    • Year and Date
      20130125-20130126
  • [Presentation] 図形注視・想起時の脳波パタン識別2013

    • Author(s)
      木下 他
    • Organizer
      電子情報通信学会MEとバイオサイバネティックス研究会
    • Place of Presentation
      飯塚
    • Year and Date
      20130125-20130126
  • [Presentation] 独立成分分析を用いた急速眼球運動時の睡眠脳波解析2013

    • Author(s)
      山下 他
    • Organizer
      電子情報通信学会MEとバイオサイバネティックス研究会
    • Place of Presentation
      飯塚
    • Year and Date
      20130125-20130126
  • [Presentation] BCIシステムにおける独立成分分析を用いた重心推定2013

    • Author(s)
      畑瀬 他
    • Organizer
      電子情報通信学会MEとバイオサイバネティックス研究会
    • Place of Presentation
      飯塚
    • Year and Date
      20130125-20130126
  • [Presentation] RLSSRを用いた急速眼球運動時の脳波解析2012

    • Author(s)
      高地 他
    • Organizer
      平成24年度日本生体医工学会九州支部学術講演会
    • Place of Presentation
      鹿児島
    • Year and Date
      20121215-20121215
  • [Presentation] 高サンプリング周波数における運動時脳波のシステム同定2012

    • Author(s)
      西原、井上
    • Organizer
      平成24年度日本生体医工学会九州支部学術講演会
    • Place of Presentation
      鹿児島
    • Year and Date
      20121215-20121215
  • [Presentation] 形状ヒストグラムに基づく特徴記述法を用いた3次元物体認識2012

    • Author(s)
      馬場 他
    • Organizer
      計測自動制御学会第31回九州支部学術講演会
    • Place of Presentation
      熊本
    • Year and Date
      20121208-20121209
  • [Presentation] 睡眠中の聴覚誘発K-complex波の解析2012

    • Author(s)
      溝上 他
    • Organizer
      計測自動制御学会第31回九州支部学術講演会
    • Place of Presentation
      熊本
    • Year and Date
      20121208-20121209
  • [Presentation] サイレントジャンケンの性能評価2012

    • Author(s)
      韓 他
    • Organizer
      第19回日本生物工学会九州支部大分大会
    • Place of Presentation
      別府
    • Year and Date
      20121201-20121201
  • [Presentation] 運動準備電位によるジャンケン動作予測-learning modelの構築-2012

    • Author(s)
      黒岩 他
    • Organizer
      第19回日本生物工学会九州支部大分大会
    • Place of Presentation
      別府
    • Year and Date
      20121201-20121201
  • [Presentation] 運動準備電位によるジャンケン動作予測-learning modelの性能評価-2012

    • Author(s)
      藤 他
    • Organizer
      第19回日本生物工学会九州支部大分大会
    • Place of Presentation
      別府
    • Year and Date
      20121201-20121201
  • [Presentation] 動作イメージBCI-Bayesian Network ModelとCommon Spatial Patternの性能比較-2012

    • Author(s)
      山口 他
    • Organizer
      第19回日本生物工学会九州支部大分大会
    • Place of Presentation
      別府
    • Year and Date
      20121201-20121201
  • [Presentation] 非定常パルス抽出法を用いた脳波パタン認識2012

    • Author(s)
      井上、宇野
    • Organizer
      第42回日本臨床神経生理学会学術大会
    • Place of Presentation
      東京
    • Year and Date
      20121108-20121110
  • [Presentation] Blind source separation based on estimation for the number of source signals using Hough transform2012

    • Author(s)
      T.Ishibashi et al.
    • Organizer
      44th ISCIE International Symposium on Stochastic Systems Theory and Its Applications
    • Place of Presentation
      東京
    • Year and Date
      20121101-20121102
  • [Presentation] Target speech extraction based on orthogonalization of joint distribution of observed signals2012

    • Author(s)
      T.Ishibashi et al.
    • Organizer
      44th ISCIE International Symposium on Stochastic Systems Theory and Its Applications
    • Place of Presentation
      東京
    • Year and Date
      20121101-20121102
  • [Presentation] 脳波のモルフォロジカル・ウェーブレット解析2012

    • Author(s)
      井上勝裕
    • Organizer
      第5回ウェーブレット変換およびその応用に関するワークショップ
    • Place of Presentation
      豊橋
    • Year and Date
      20121009-20121010
    • Invited
  • [Presentation] A new single-trial-EEG-based BCI using silent speech tasks2012

    • Author(s)
      T.Yamazaki, et al
    • Organizer
      NEUROSCIENCE 2012
    • Place of Presentation
      New Orleans
    • Year and Date
      20121000
  • [Presentation] Spatiotemporal localization and comparison of brain activity on recalling one type of Kanji homophones2012

    • Author(s)
      Y.Tanaka et al.
    • Organizer
      第27回生体生理工学シンポジウム
    • Place of Presentation
      札幌
    • Year and Date
      20120919-20120921
  • [Presentation] 身体部位名称想起時における脳内活動部位の時空間推定2012

    • Author(s)
      田中 他
    • Organizer
      第28回ファジィシステムシンポジウム
    • Place of Presentation
      名古屋
    • Year and Date
      20120912-20120914
  • [Presentation] Silent speech BCI: Test fo DIVA hypothesis2012

    • Author(s)
      S.Ueno et al.
    • Organizer
      ISCIIA 2012
    • Place of Presentation
      札幌
    • Year and Date
      20120820-21020823
  • [Presentation] Spatiotemporal human brain activities on recalling body names2012

    • Author(s)
      T.Yamanoi et al.
    • Organizer
      ISCIIA 2012
    • Place of Presentation
      札幌
    • Year and Date
      20120820-20120823
  • [Presentation] 局所パタンスペクトルを用いた睡眠脳波の形状特徴解析2012

    • Author(s)
      井上 他
    • Organizer
      日本睡眠学会第37回定期学術集会
    • Place of Presentation
      横浜
    • Year and Date
      20120628-20120630
  • [Presentation] 睡眠脳波の時間周波数解析2012

    • Author(s)
      高地 他
    • Organizer
      日本睡眠学会第37回定期学術集会
    • Place of Presentation
      横浜
    • Year and Date
      20120628-20120630
  • [Presentation] サイレントスピーチBCI-発話ジャンケン時とサイレントジャンケン時の運動準備電位-2012

    • Author(s)
      山田 他
    • Organizer
      電子情報通信学会 MEとバイオサイバネティックス研究会
    • Place of Presentation
      富山
    • Year and Date
      20120525-20120525
  • [Presentation] 身体部位名称想起時における脳内活動部位について2012

    • Author(s)
      田中 他
    • Organizer
      第22回ソフトサイエンス・ワークショップ
    • Place of Presentation
      東京
    • Year and Date
      20120309-20120310
  • [Book] Brain-Computer Interface2013

    • Author(s)
      T.Yamazaki et al.
    • Total Pages
      20
    • Publisher
      INTECH

URL: 

Published: 2014-07-24  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi