• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

話者の映像及び話声の性質が高精度高感性音声提示システムに与える影響

Research Project

Project/Area Number 17700223
Research Category

Grant-in-Aid for Young Scientists (B)

Allocation TypeSingle-year Grants
Research Field Sensitivity informatics/Soft computing
Research InstitutionTohoku University

Principal Investigator

坂本 修一  東北大学, 電気通信研究所, 助手 (60332524)

Project Period (FY) 2005 – 2006
Project Status Completed (Fiscal Year 2006)
Budget Amount *help
¥3,300,000 (Direct Cost: ¥3,300,000)
Fiscal Year 2006: ¥1,200,000 (Direct Cost: ¥1,200,000)
Fiscal Year 2005: ¥2,100,000 (Direct Cost: ¥2,100,000)
Keywordsマルチモーダル情報処理 / 視聴覚統合 / 音声知覚 / 話速変換音声 / 音声伸長 / 単語了解度 / 読唇 / 高齢者
Research Abstract

本研究の目的は,話者映像の有無や,ピッチ,話速といった話声の性質,話者映像と話声の同期,話者の口の動きといったパラメータが,音韻知覚及び視聴者の感性情報にどのような影響を及ぼすか定量的に明らかにし,得られた知見に基づいて,高感性音声提示システムの構築法を検討することである.
今年度は昨年度と同様に音声の話速に注目し,話速を遅らせることで時間長を伸長した音声と通常速度の話者映像との組み合わせが,文章了解度にどのような影響を及ぼすかを検討した.あわせて,単語刺激を用いて話者映像と伸長音声を組み合わせた際の映像と音声のズレの検知限,許容限を心理実験により求め,両者の関係を分析した.まず,文章了解度試験を行ったところ,音声伸長量が200ms以内であれば,話者映像と音声の間にズレが生じていても,話者映像を付加することによる文章了解度の向上が見込めるという結果が得られた.この結果は,昨年度単語を用いて得られた結果と同様であり,音声伸長量を200ms以内に設定すれば,話者映像が音韻知覚を促進するということを示している.一方,伸長音声と通常速度の話者映像を用いて話者映像と音声とのズレの検知限を求めたところ,約230msが検知限となることが示された.また,ズレの許容限は約340msであった.
これらの結果と,昨年度得られた単語了解度の結果を総合すると,話者映像と音声のズレが検知できない範囲であれば,話者映像が音韻知覚の向上に寄与するということが示唆される.逆に言うと,話者映像と音声のズレの検知といった感性情報が音声知覚に負の影響を及ぼしているといえよう.これらの知見は,高感性音声提示システムを構築する上での指針となり得る極めて重要な知見であると思われる.

Report

(2 results)
  • 2006 Annual Research Report
  • 2005 Annual Research Report
  • Research Products

    (2 results)

All 2006

All Journal Article (2 results)

  • [Journal Article] 視聴覚の提示タイミングおよび提示速度の違いが単語音声認知に及ぼす影響2006

    • Author(s)
      田中章浩
    • Journal Title

      日本音響学会聴覚研究会資料 H-2006-67

      Pages: 369-374

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 単語音声と話者映像のずれが視聴覚統合に及ぼす影響2006

    • Author(s)
      津村光美
    • Journal Title

      日本音響学会講演論文集 3-P-9

      Pages: 467-468

    • Related Report
      2005 Annual Research Report

URL: 

Published: 2005-04-01   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi