• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2017 Fiscal Year Research-status Report

How does the brain restore missing speech information?

Research Project

Project/Area Number 17K18705
Research InstitutionKyushu University

Principal Investigator

上田 和夫  九州大学, 芸術工学研究院, 准教授 (80254316)

Co-Investigator(Kenkyū-buntansha) Remijn GerardB.  九州大学, 芸術工学研究院, 准教授 (40467098)
中島 祥好  九州大学, 芸術工学研究院, 教授 (90127267)
Project Period (FY) 2017-06-30 – 2020-03-31
Keywords音韻修復
Outline of Annual Research Achievements

本研究は,音声を断続させ,欠落した部分を雑音で埋めると,雑音を入れずに欠けたままにした場合に比べて明瞭度が向上する効果について調べ,脳がどのようにして欠けた情報を埋め合わせているのかについて調べることを目的としている。具体的には,意味のある文を発話した音声を用いて,これを 220 ms 以下の区間長で,周期的に断続する。区間長が短ければ 100% 近い明瞭度が得られること,空白部分を音声よりも充分に強い雑音で埋めると明瞭度が有意に向上することがすでにわかっている。本研究では,次の三点において,従来の研究では知られていなかった事柄を明らかにした。第一に,単なる断続音声ではなく,断続後の音声区間の時間軸を逆転させた「局部時間反転断続音声」を用いたところ,雑音なしの条件で,断続音声の場合では区間長が 200 ms を越えても 70% 以上の明瞭度が得られるのに対して,局部時間反転断続音声の場合は区間長が 20 ms を越えただけで急激に明瞭度の低下が起こり,区間長 80 ms の条件で明瞭度が 10% 以下にまで低下した。第二に,空白部分を音声よりも充分に強い雑音で置き換えたところ,断続音声,局部時間反転断続音声の両者で最大 20% 程度の有意な明瞭度の向上が見られた。第三に,雑音の強さを音声の強さの実効値と等しくなるまで低下させたところ,断続音声では明瞭度の向上が見られなくなったのに対して,局部時間反転断続音声では依然として最大 20% 程度の明瞭度向上が見られた。このような現象が生じる理由は,聴覚末梢系におけるマスキングの効果だけでは説明がつかず,脳が音声の意味を限られた情報から組み立てる能力と深く関係していると考えざるを得ない。その他,局部時間反転音声の明瞭度についての多言語比較の研究成果を,Nature の姉妹誌である Scientific Reports に出版できた。

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

従来の研究では知られていなかった事実を明らかにすることができ,さらに調べるべき点が明らかになったので,今後の研究方針を定めることができた。また,局部時間反転音声の明瞭度についての多言語比較の研究成果を,Nature の姉妹誌である Scientific Reports に出版できた。

Strategy for Future Research Activity

当初計画していた音声刺激 5 種類のうち,2 種類のみを用いて従来にはない知見を得ることができたため,今後,この知見をより確かなものとして論文の出版につなげられるような実験を実施するとともに,未使用の刺激についても予備実験を実施する。

Causes of Carryover

次年度に,当初予定されていなかったサバティカルを取得することになり,今年度使用する予定であった外国旅費を,次年度に回した方が有効に活用できると考えたため,今年度に入ってから,計画的に次年度使用額を生じさせた。したがって,次年度使用額は,サバティカル期間中に外国旅費として使用する予定である。

  • Research Products

    (25 results)

All 2018 2017 Other

All Int'l Joint Research (2 results) Journal Article (4 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 4 results,  Open Access: 3 results) Presentation (13 results) (of which Int'l Joint Research: 8 results,  Invited: 1 results) Book (1 results) Remarks (4 results) Funded Workshop (1 results)

  • [Int'l Joint Research] University of British Columbia(Canada)

    • Country Name
      Canada
    • Counterpart Institution
      University of British Columbia
  • [Int'l Joint Research] Technische Universitaet Darmstadt(Germany)

    • Country Name
      Germany
    • Counterpart Institution
      Technische Universitaet Darmstadt
  • [Journal Article] Temporal Resolution Needed for Auditory Communication: Measurement With Mosaic Speech2018

    • Author(s)
      Nakajima Yoshitaka、Matsuda Mizuki、Ueda Kazuo、Remijn Gerard B.
    • Journal Title

      Frontiers in Human Neuroscience

      Volume: 12(149) Pages: -

    • DOI

      10.3389/fnhum.2018.00149

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Intelligibility of locally time-reversed speech: A multilingual comparison2017

    • Author(s)
      Ueda Kazuo、Nakajima Yoshitaka、Ellermeier Wolfgang、Kattner Florian
    • Journal Title

      Scientific Reports

      Volume: 7 Pages: -

    • DOI

      10.1038/s41598-017-01831-z

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Altered human voice processing in the frontal cortex and a developmental language delay in 3- to 5-year-old children with autism spectrum disorder2017

    • Author(s)
      Yoshimura Yuko、Kikuchi Mitsuru、Hayashi Norio、Hiraishi Hirotoshi、Hasegawa Chiaki、Takahashi Tetsuya、Oi Manabu、Remijn Gerard B.、Ikeda Takashi、Saito Daisuke N.、Kumazaki Hirokazu、Minabe Yoshio
    • Journal Title

      Scientific Reports

      Volume: 7 Pages: -

    • DOI

      10.1038/s41598-017-17058-x

    • Peer Reviewed / Open Access
  • [Journal Article] A NIRS study on cortical hemodynamic responses to normal and whispered speech in 3- to 7-year-old children2017

    • Author(s)
      Remijn, G.B., Kikuchi, M., Shitamichi, K., Ueno, S., Yoshimura, Y., Tsubokawa, T., Kojima, H., Higashida, H., Minabe, Y.
    • Journal Title

      Journal of Speech, Language and Hearing Research

      Volume: 60 Pages: 465-470

    • Peer Reviewed
  • [Presentation] Irrelevant sound effects with locally time-reversed speech: Effects of native language2018

    • Author(s)
      Kazuo UEDA, Yoshitaka NAKAJIMA, Florian KATTNER, Wolfgang ELLERMEIER
    • Organizer
      日本音響学会春季研究発表会
  • [Presentation] パワースペクトル因子を用いて合成した雑音駆動音声の知覚:鳴音性と明瞭度との関係2018

    • Author(s)
      岸田拓也,中島祥好,上田和夫,G. B. Remijn, 梅本晟弥
    • Organizer
      日本音響学会聴覚研究会
  • [Presentation] Demonstrations of Locally Time-Reversed Choral Music in Four Different Languages2017

    • Author(s)
      Kazuo UEDA, Yoshitaka NAKAJIMA
    • Organizer
      The 6th Conference of the Asia-Pacific Society for the Cognitive Sciences of Music, Kyoto.
    • Int'l Joint Research
  • [Presentation] Intelligibility of English noise-vocoded speech resynthesized from spectral-change factors2017

    • Author(s)
      Takuya KISHIDA, Yoshitaka NAKAJIMA, Kazuo UEDA, Gerard Remijn, Sophia Arndt, Mark A. Elliott
    • Organizer
      Fechner Day 2017: The 33rd Annual Meeting of the International Society for Psychophysics, Fukuoka, Japan.
    • Int'l Joint Research
  • [Presentation] Irrelevant sound effects with locally time-reversed speech2017

    • Author(s)
      Wolfgang Ellermeier, Florian Kattner, Kazuo UEDA, Yoshitaka NAKAJIMA
    • Organizer
      Fechner Day 2017: The 33rd Annual Meeting of the International Society for Psychophysics, Fukuoka, Japan.
    • Int'l Joint Research
  • [Presentation] The perception and recognition of auditory icons by Japanese drivers2017

    • Author(s)
      Joao Paulo Cabral, Yoshitaka NAKAJIMA, Kazuo UEDA, Gerard REMIJN
    • Organizer
      Fechner Day 2017: The 33rd Annual Meeting of the International Society for Psychophysics, Fukuoka, Japan.
    • Int'l Joint Research
  • [Presentation] Perceptual restoration of interrupted locally time-reversed speech2017

    • Author(s)
      Kazuo UEDA, Nozomi INUI, Kaisei SHIRAKI, Valter CIOCCA, Yoshitaka NAKAJIMA, Gerard REMIJN
    • Organizer
      Fechner Day 2017: The 33rd Annual Meeting of the International Society for Psychophysics, Fukuoka, Japan.
    • Int'l Joint Research
  • [Presentation] Irrelevant sound effects with locally time-reversed speech: Real performance difference between German and Japanese native speakers?2017

    • Author(s)
      Kazuo UEDA, Akie SHIBATA, Yoshitaka NAKAJIMA, Katharina ROST, Florian KATTNER, Wolfgang ELLEMEIER
    • Organizer
      Fechner Day 2017: The 33rd Annual Meeting of the International Society for Psychophysics, Fukuoka, Japan.
    • Int'l Joint Research
  • [Presentation] Temporal resolution needed for auditory communication: Measurement with mosaic speech2017

    • Author(s)
      Yoshitaka NAKAJIMA, Mizuki MATSUDA, Kazuo UEDA, Gerard REMIJN
    • Organizer
      Fechner Day 2017: The 33rd Annual Meeting of the International Society for Psychophysics, Fukuoka, Japan.
    • Int'l Joint Research
  • [Presentation] Phonology and psychophysics: Is sonority real?,2017

    • Author(s)
      Yoshitaka NAKAJIMA, Kazuo UEDA, Gerard REMIJN, Yuko YAMASHITA, Takuya KISHIDA
    • Organizer
      Fechner Day 2017: The 33rd Annual Meeting of the International Society for Psychophysics, Fukuoka, Japan.
    • Int'l Joint Research
  • [Presentation] 臨界帯域フィルターを通した合唱音楽のパワー変動の因子分析:ケプストラム分析の適用2017

    • Author(s)
      上田和夫,中島祥好
    • Organizer
      日本音楽知覚認知学会秋季研究発表会
  • [Presentation] 多変量解析と劣化音声知覚から見た多言語音声の共通性2017

    • Author(s)
      上田和夫
    • Organizer
      Kの会 第108回例会
    • Invited
  • [Presentation] ケプストラム分析を用いた音声の因子分析2017

    • Author(s)
      上田和夫,岸田拓也,中島祥好
    • Organizer
      YPS 2017
  • [Book] 生き物の音の事典2018

    • Author(s)
      生物音響学会編, 上田 和夫
    • Total Pages
      印刷中
    • Publisher
      朝倉書店
  • [Remarks] Ueda Laboratory

    • URL

      http://www.design.kyushu-u.ac.jp/~ueda/index.html

  • [Remarks] Ueda Laboratory: 九州大学大学院芸術工学研究院 上田研究室

    • URL

      http://www.design.kyushu-u.ac.jp/~ueda/uedalab_home_j.html

  • [Remarks] Kyushu University: research activities

    • URL

      http://hyoka.ofc.kyushu-u.ac.jp/search/details/K002356/english.html#Academic_Activities

  • [Remarks] 九州大学:研究者情報

    • URL

      http://hyoka.ofc.kyushu-u.ac.jp/search/details/K002356/index.html

  • [Funded Workshop] Fechner Day 2017: The 33rd Annual Meeting of the International Society for Psychophysics, Fukuoka, Japan.2017

URL: 

Published: 2018-12-17  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi