• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2018 年度 実施状況報告書

音声知覚のトップダウンとボトムアップ:脳はいかに欠けた情報を埋め合わせるか

研究課題

研究課題/領域番号 17K18705
研究機関九州大学

研究代表者

上田 和夫  九州大学, 芸術工学研究院, 准教授 (80254316)

研究分担者 Remijn GerardB.  九州大学, 芸術工学研究院, 准教授 (40467098)
中島 祥好  九州大学, 芸術工学研究院, 教授 (90127267)
研究期間 (年度) 2017-06-30 – 2020-03-31
キーワード音声修復 / 局部時間反転音声 / 断続音声
研究実績の概要

音声を周期的に断続した断続音声では,もとの50%の情報しか呈示されない。しかし,断続周期の条件により,また削除された部分を雑音で埋めることにより,80%程度以上の情報が復元される。これは,あたかも視覚における盲点のように,欠落した入力情報を,周りの情報や知識をもとに脳が推測し,埋め合わせているように見えるかも知れない。しかし,聴覚の場合,入力情報は常に時間的な変化の情報として継時的にしか入力されないため,視覚の盲点と同じには扱えない。一方で,どのような情報を脳が利用して音声修復を行っているのかについてはよくわかっていない。本研究は,脳が行う音声修復の仕組みについて探るため,様々な操作を加えた音声を断続し,また削除された部分を雑音で埋めることで,どのような復元が行われるのかを調べている。
本年度は,音声を 20-160 ミリ秒ごとに区切った後,それぞれの区間を局部的に時間反転させた,局部時間反転音声を用いて,これを一つの区間おきに削除した局部時間反転断続音声,削除した区間に雑音を入れた条件,および断続音声の条件を作り,さらに雑音の強さが音声の強さと同じ条件,10 dB 強い条件,10 dB 弱い条件を作って,音声の聴き取りにどのような変化が生じるのかを調べた。その結果,局部時間反転音声を断続させると,明瞭度が大幅に低下すること,区間長 60 ミリ秒以下の条件では,雑音で埋めることで明瞭度が上昇するが,音声よりも弱い雑音では,その効果が見られないことがわかった。断続音声では,60 ミリ秒以下の短い時間間隔で断続を行った場合,断続を行わない場合と比べて明瞭度がそもそも変化せず,雑音を挿入しても明瞭度が上昇することはない。局部時間反転断続音声において,音声よりも明らかに弱い雑音では明瞭度の上昇が見られなかったことから,音声修復の仕組みを明らかにする研究の手がかりが得られたと考える。

現在までの達成度 (区分)
現在までの達成度 (区分)

1: 当初の計画以上に進展している

理由

当初計画していた実験は,順調に進んで新しいデータを生みだしており,今後,研究を進めるうえでの貴重な手がかりが得られた。さらに,本年度は,劣化音声の知覚に関して,水準の高い国際査読誌に 2 編の原著論文を出版でき,また,招待論文として我々の研究グループの研究成果をまとめた解説記事も学会誌に掲載された。書籍の原稿もいくつか脱稿でき,印刷中である。カナダおよびドイツの共同研究者との研究打ち合わせもでき,さらに 1 篇の原著論文を国際誌に投稿し,現在,査読中である。以上の理由により,当初の計画以上に進展していると判断した。

今後の研究の推進方策

今後は,局部時間反転断続音声に挿入する雑音の性質を変える,劣化音声として雑音駆動音声,モザイク音声を用いるなどして,音声と雑音のどのような性質が,音声修復に影響を与えるのかを探索する。また,日本語以外の言語でも同様の結果が得られるのかどうかを,海外の研究協力者と調べていく。

次年度使用額が生じた理由

5 月に予定していた海外出張(学会発表)を,学内の事情により断念せざるを得なくなり,その代わりに 11 月の学会で発表することにし,別に予定していた海外共同研究先との研究打ち合わせもこのときに合わせて行うことになったため,結果的に旅費を節約できたことになり,次年度使用額が生じた。次年度は,成果発表のためにより多くの旅費が必要となる見込みであるので,次年度使用額は有効に使用できるものと考える。

  • 研究成果

    (18件)

すべて 2019 2018 その他

すべて 国際共同研究 (2件) 雑誌論文 (3件) (うち国際共著 2件、 査読あり 2件、 オープンアクセス 3件) 学会発表 (8件) (うち国際学会 3件、 招待講演 2件) 図書 (3件) 備考 (1件) 産業財産権 (1件)

  • [国際共同研究] University of British Columbiah(カナダ)

    • 国名
      カナダ
    • 外国機関名
      University of British Columbiah
  • [国際共同研究] Technische Universitaet Darmstadt(ドイツ)

    • 国名
      ドイツ
    • 外国機関名
      Technische Universitaet Darmstadt
  • [雑誌論文] Frequency specificity of amplitude envelope patterns in noise-vocoded speech2018

    • 著者名/発表者名
      Ueda Kazuo、Araki Tomoya、Nakajima Yoshitaka
    • 雑誌名

      Hearing Research

      巻: 367 ページ: 169~181

    • DOI

      10.1016/j.heares.2018.06.005

    • 査読あり / オープンアクセス
  • [雑誌論文] Temporal Resolution Needed for Auditory Communication: Measurement With Mosaic Speech2018

    • 著者名/発表者名
      Nakajima Yoshitaka、Matsuda Mizuki、Ueda Kazuo、Remijn Gerard B.
    • 雑誌名

      Frontiers in Human Neuroscience

      巻: 12(149) ページ: -

    • DOI

      10.3389/fnhum.2018.00149

    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] How sonority appears in speech analyses2018

    • 著者名/発表者名
      Nakajima Yoshitaka、Ueda Kazuo、Remijn Gerard B.、Yamashita Yuko、Kishida Takuya
    • 雑誌名

      Acoustical Science and Technology

      巻: 39 ページ: 179~181

    • DOI

      https://doi.org/10.1250/ast.39.179

    • オープンアクセス / 国際共著
  • [学会発表] Irrelevant speech effects with locally time-reversed speech: Native vs. non-native language2018

    • 著者名/発表者名
      Ueda, K., Nakajima, Y., Kattner, F., and Ellermeier, W.
    • 学会等名
      The 176th Meeting of the Acoustical Society of America and 2018 Acoustics Week in Canada in Victoria
    • 国際学会
  • [学会発表] Irrelevant speech effects with locally time-reversed speech: Native vs. non-native language with German and Japanese participants2018

    • 著者名/発表者名
      Ueda, K., Nakajima, Y., Kattner, F., and Ellermeier, W.
    • 学会等名
      Lunch Talk in Dept. Ophthalmology & Visual Sciences
    • 国際学会 / 招待講演
  • [学会発表] Factor analyses of speech and an acoustic language universal2018

    • 著者名/発表者名
      Ueda, K.
    • 学会等名
      Research Colloquium at Technische Universitaet Darmstadt
    • 国際学会 / 招待講演
  • [学会発表] Irrelevant sound effects with locally time-reversed speech: Speech reversal and language familiarity2018

    • 著者名/発表者名
      Ueda, K., Nakajima, Y., Kattner, F., and Ellermeier, W.
    • 学会等名
      日本心理学会第 82 回大会
  • [学会発表] モザイク処理を施した日本語名詞句音声の明瞭度について2018

    • 著者名/発表者名
      尾中達郎,中島祥好, 上田和夫, Gerard B. Remijn
    • 学会等名
      日本音響学会2018年秋季研究発表会
  • [学会発表] 臨界帯域フィルターを通した合唱音楽のパワー変動の因子分析:通常音声と歌唱音声の違い2018

    • 著者名/発表者名
      上田和夫,中島祥好
    • 学会等名
      日本音響学会2018年秋季研究発表会
  • [学会発表] 英語における頭子音連結の多変量解析2018

    • 著者名/発表者名
      張 一新,中島 祥好,于 暁陽,上田 和夫,岸田 拓也, Arndt, S., Elliott, M. A.
    • 学会等名
      言語資源活用ワークショップ2018
  • [学会発表] 英語における前置詞句についての音響分析2018

    • 著者名/発表者名
      于 暁陽,中島 祥好,#張 一新,上田 和夫,岸田 拓也
    • 学会等名
      言語資源活用ワークショップ2018
  • [図書] 聴知覚(箱田裕司編,野島一彦・繁桝算男監修,公認心理師の基礎と実践,第7巻,知覚・認知心理学,第4章)2019

    • 著者名/発表者名
      上田和夫
    • 総ページ数
      印刷中
    • 出版者
      東京:遠見書房
  • [図書] 声の魅力(三浦佳世,河原純一郎編,美と魅力の心理学)2019

    • 著者名/発表者名
      上田和夫
    • 総ページ数
      印刷中
    • 出版者
      京都:ミネルヴァ書房
  • [図書] 有斐閣 現代心理学辞典(子安増生・丹野義彦・箱田裕司監修),執筆項目:音響心理学,音声知覚など16項目2019

    • 著者名/発表者名
      上田和夫
    • 総ページ数
      印刷中
    • 出版者
      有斐閣
  • [備考] Ueda Laboratory

    • URL

      http://www.design.kyushu-u.ac.jp/~ueda/research.html

  • [産業財産権] 音声伝達状況評価システム及び音声伝達状況評価方法2019

    • 発明者名
      中島 祥好,上田 和夫,ジェラード ビー レメイン,他 4 名
    • 権利者名
      中島 祥好,上田 和夫,ジェラード ビー レメイン,他 4 名
    • 産業財産権種類
      特許
    • 産業財産権番号
      特願2019-026825

URL: 

公開日: 2019-12-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi