Project/Area Number |
19H00630
|
Research Category |
Grant-in-Aid for Scientific Research (A)
|
Allocation Type | Single-year Grants |
Section | 一般 |
Review Section |
Medium-sized Section 10:Psychology and related fields
|
Research Institution | Kyushu University |
Principal Investigator |
上田 和夫 九州大学, 芸術工学研究院, 准教授 (80254316)
|
Co-Investigator(Kenkyū-buntansha) |
松尾 行雄 東北学院大学, 教養学部, 教授 (40323117)
Remijn GerardB. 九州大学, 芸術工学研究院, 准教授 (40467098)
竹市 博臣 国立研究開発法人理化学研究所, 情報統合本部, 専任技師 (60242020)
光藤 崇子 (齊藤崇子) 九州大学, 医学研究院, 特別研究員(RPD) (70423522)
Wolf Alexandra 国立研究開発法人理化学研究所, 革新知能統合研究センター, 基礎科学特別研究員 (70936955)
平野 羊嗣 宮崎大学, 医学部, 准教授 (90567497)
蓮尾 絵美 九州大学, 芸術工学研究院, 助教 (60725969)
中島 祥好 九州大学, 芸術工学研究院, 教授 (90127267)
|
Project Period (FY) |
2019-04-01 – 2024-03-31
|
Project Status |
Granted (Fiscal Year 2023)
|
Budget Amount *help |
¥44,980,000 (Direct Cost: ¥34,600,000、Indirect Cost: ¥10,380,000)
Fiscal Year 2023: ¥8,710,000 (Direct Cost: ¥6,700,000、Indirect Cost: ¥2,010,000)
Fiscal Year 2022: ¥8,580,000 (Direct Cost: ¥6,600,000、Indirect Cost: ¥1,980,000)
Fiscal Year 2021: ¥9,750,000 (Direct Cost: ¥7,500,000、Indirect Cost: ¥2,250,000)
Fiscal Year 2020: ¥8,450,000 (Direct Cost: ¥6,500,000、Indirect Cost: ¥1,950,000)
Fiscal Year 2019: ¥9,490,000 (Direct Cost: ¥7,300,000、Indirect Cost: ¥2,190,000)
|
Keywords | 時間窓 / 音声知覚 / 劣化音声 / 脳活動計測 / 眼球運動計測 / 脳磁図 / 劣化音声知覚 / 変調パワースペクトル / 二重時間窓仮説 / 脳磁場計測 / 市松音声 / 脳活動 |
Outline of Research at the Start |
連続的に流れてくる音声を聴きとり,意味を理解するためには,音声の細かい時間的な変化と,大まかな変化の両方を捉えて,子音や母音を聴きとることと,文脈を理解することの両方が必要とされています。そして,脳のなかにもこれらに対応する二つのしくみが存在するとされてきました。しかし,この二つのしくみがどのように組み合わされて音声が理解されているのかは,まだよく分かっていません。本研究では,音声の時間的な変化を劣化させた音声を合成し,劣化の度合によって音声の聴き取りがどう変化するのかを調べることで謎の解明に役立てます。
|
Outline of Annual Research Achievements |
通常の音声では声帯による周期的な振動から声の高さに関する情報が得られる。この情報は音声が断続されたときに音声の断片をつなぎ合わせるために重要であることがわかっている。今年度は以下のようなモザイク音声を用いた研究を実施した。すなわち,声の高さに関する情報を取り除き,さらに言葉を表す記号としての情報(音声の振幅包絡)を,いくつかの周波数帯域における階段状に劣化させた。そして,(1) モザイク音声を断続すると大幅に了解度が低下すること,(2) 一方で,階段状の振幅包絡を延長し,断続によって生じた空白区間を徐々に埋めていくと,断続区間長 40 ミリ秒までの範囲内では劇的に了解度が向上することが示された。このことから,空白が埋められることによってモザイク音声の断片がよりまとまりやすくなり,了解度が向上したのではないかと考え,音響学におけるトップジャーナルである国際査読誌,米国音響学会誌に論文を発表したところ,この学術雑誌からオンライン・ジャーナルクラブに招待され,発表,討論を行った。この続編となる実験もすでに実施し,論文の下書きを開始している。この他に (1) 周波数および時間の両次元で断続を行った「市松音声」について,4, 8, 16, 20 帯域の条件を含めて了解度を測定する実験,(2) 市松音声の無音区画を雑音で置換し(市松音声と逆位相の市松雑音で無音区画を充填),雑音のレベルを操作して了解度への影響を調べる実験,(3) 健常者と精神疾患患者の画像刺激に対する眼球運動計測から,脳内リズムの違いについて考察する研究,(4) 市松音声の聴取時における脳活動を脳磁図で調べる実験,(5) 話速が異なる音声に対し,特定の周波数もしくは全体を局所時間反転音声させたときの音声明瞭度の変化を調べる実験を実施し,論文執筆に向けてデータの蓄積を行った。このうち (1) はすでに投稿準備中である。
|
Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
音響学におけるトップジャーナルである米国音響学会誌から論文を出版することができ,オンライン・ジャーナルクラブに招待されたため。さらに今後の論文執筆に貢献する貴重なデータが得られたため。
|
Strategy for Future Research Activity |
すでに得られたデータに関しては出版を急ぐ。「市松音声」に関する研究から,因子分析の結果得られた 4 周波数帯域が音声知覚にとって重要な独立した四つの手がかりを表していること,また音声の了解度に対する刺激区間長の影響はこれら四帯域において変わらないことが実証されたため,周波数帯域にかかわらず了解度を低下させる要因となる区間長 160 ミリ秒という条件が聴覚のどのような特性と関係しているのかを,市松音声の両耳分離呈示,二話者の音声を組み合わせた市松交代音声などの刺激を用いて今後,解明していく。さらに,調波複合音を用いて周波数帯域の交代が聴覚体制化におよぼす影響を調べることにより,聴覚のどのような一般的な特性が聴覚体制化および音脈分凝と関係しているのかを解明していく。
|