研究課題/領域番号 |
22K19809
|
研究種目 |
挑戦的研究(萌芽)
|
配分区分 | 基金 |
審査区分 |
中区分61:人間情報学およびその関連分野
|
研究機関 | 長岡技術科学大学 |
研究代表者 |
南部 功夫 長岡技術科学大学, 工学研究科, 准教授 (40553235)
|
研究期間 (年度) |
2022-06-30 – 2025-03-31
|
研究課題ステータス |
交付 (2022年度)
|
配分額 *注記 |
6,240千円 (直接経費: 4,800千円、間接経費: 1,440千円)
2024年度: 1,560千円 (直接経費: 1,200千円、間接経費: 360千円)
2023年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2022年度: 3,380千円 (直接経費: 2,600千円、間接経費: 780千円)
|
キーワード | 脳波 / 聴覚注意 / 頭部伝達関数 / 脳 / 音声 / 注意 |
研究開始時の研究の概要 |
機械学習により構築したデコーダー(判別器)を用いて、脳活動から人間が複数の音源のうち注目している音を予測する聴覚注意デコーディング技術では、注目音の推定に非常に時間がかかり、ユーザーの意図に合わせて聴きたい音を瞬時に切り替えるようなことは困難である。本研究では、注意を向けた音を瞬時に切り替える脳のメカニズムを解明し、その仕組みを応用して切り替えに関する脳情報を組み込んだ新しい聴覚注意デコーディングに挑戦する。
|
研究実績の概要 |
本研究では、聴覚注意の切り替えを捉えることができる聴覚注意デコーディング技術の検討を行うことを目的とする。 聴覚注意デコーディングとは、複数の話者が話している状況で聴者がどの話者に注目しているかを生体情報(脳波)から検出する方法である。これまでに聴覚注意デコーディングに関する数多くの研究が行われてきたが、2つの異なる音源への注意など、限定された条件が多くなっていた。 そこで、本研究では、実生活の環境で流れている音声をイヤホンで再現し、注目を向けて聴いている音声の方向の判別が可能か調査することを目的として、頭部伝達関数を用いて3人の話者を前後左右に配置されている状況を再現し、被験者には3人の話者の中の1人に注目してもらう実験を実施した。2話者の条件よりタスクが複雑になったが、約75~80%の高い判別精度が得ることができた。 次に3人の話者の中の1人の話者に突然話しかけられる状況を再現した実験を行い、聴覚注意の切り替えを捉えることができるか検討した。しかし、この実験における判別精度は約35~50%であった。 このことから、話を聴いている途中で違う話者に切り替える複雑なタスクは内容の興味や理解がないと困難だと考えられ、スムーズに話者を切り替えられるようなシステムを今後考慮する必要があると考えられる。
|
現在までの達成度 (区分) |
現在までの達成度 (区分)
2: おおむね順調に進展している
理由
本年度は複数話者が存在する実験条件と切り替えが生じる実験条件の2つを検討することができた。これにより、複数話者条件での精度が確保できることと、切り替え時はやはり精度が下がることを確認できた。
|
今後の研究の推進方策 |
これまでの結果から実環境に近い状況では精度が下がり、注意の切り替えも非常に難しいことが確認されたため、当初の予定通り、今後は、切り替え時の精度を向上させるための新しい解析について検討していく予定である。 また、これまでは基本的な聴覚注意デコーディングの方法として、正則線形回帰の手法を使っていた。今後は、ニューラルネットワークなどの別の手法を用いて精度の向上を検討する。 さらに、音源として人工音声に着目し、通常の音声を人工音声に変更することができるかどうかも調べる。
|