• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2011 Fiscal Year Annual Research Report

3次元非線形音声生成モデルの構築と病的音声の解析

Research Project

Project/Area Number 23300071
Research InstitutionKyushu University

Principal Investigator

鏑木 時彦  九州大学, 大学院・芸術工学研究院, 准教授 (30325568)

Co-Investigator(Kenkyū-buntansha) 元木 邦俊  北海学園大学, 工学部, 教授 (80219980)
松崎 博季  北海道工業大学, 創生工学部, 准教授 (60305901)
徳田 功  立命館大学, 理工学部, 准教授 (00261389)
Keywords音声 / 音声生成 / 発声 / 病理発声 / 声帯 / 声道 / 音響解析 / 非線形モデル
Research Abstract

病理発声における声帯の不規則振動の解析のため、ハイスピードカメラで撮影されたビデオデータよりキモグラム、ならびに高速グロットグラムを作成し、振動様態の可視化を行った。その結果、左右の声帯が同位相、逆位相の振動を繰り返す、一種のモードスイッチング現象が観察された。声帯振動は呼気の流体力をエネルギー源とする自励振動であり、自然に発生する自励振動において、このようなスイッチング現象が生じること自体がきわめて特殊である。この特異的な振動現象を理解するため、非線形振動子の結合系における「2つの周期解のスイッチング現象」を参考に、ダイナミクスの検討を行った。今後は、実際の声帯の物理的機構に即したメカニズム解明を行う予定である。また、発声中の声帯振動の観測法に関して、二つの内視鏡カメラを用いて異なる角度から声帯振動の同時撮影を行い、ステレオマッチング法により声帯の3次元動態の復元を試みた。一名の被験者の通常の発声条件における声帯の3次元ダイナミクスを復元し、上唇下唇の位相差などの動的な特徴を捉えることができることを示した。
音声発声時の声道音響解析の高精度化に関しては、音場の時間的な推移を時間領域差分法(FDTD法)により可視化した。平面波及び高次モードを含む音場が概ね数msで定常状態に至り、音源付近の大きな振幅変化が局所的に存在して空間を伝搬しないエバネッセントモードにより表現される様子を示すことができた。また、声道壁を伝わるなどして口唇以外から放射される音声の特徴についても検討を行った。小型マイクロホンを直線アレイ状に配置し、受音した音圧傾度から頸部皮膚近傍の粒子速度を求めた。今後の数値シミュレーションや物理モデル作成のための形状データとして、MRI装置により定常母音および連続母音発話時のMRIデータを収集した。母音発話MRI画像データから半自動的に取得した声道形状の音響特性を、3次元のGPGPU-FDTD法で計算するシミュレータを開発した。本シミュレータは計算しながら即時に計算結果を可視化できるのみならず、インタラクティブに参照点を変更することも可能である。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

音声の生成過程における非線形の要因として、喉頭の音源部と声道の音響フィルタとの相互作用に着目し、その相互作用の効果について定量的な知見を得ることができた。また、病理音声における不規則的な声帯振動について、具体的なデータを立脚点としてそのメカニズム解明に向けた検討が開始された。声帯振動の観測法、声道音響特性の解析法についても、順調に研究成果が得られている。

Strategy for Future Research Activity

病理的発声における不規則的な声帯振動のメカニズムを解明するには、粘弾性的な運動を行う声帯の連続体モデルと、声帯間を通過する呼気流の解析法を確立することが不可欠であり、次年度は特にこれらの課題に対して重点的に取り組む。呼気流の解析に関しては、すでに2次元の境界層解析とポテンシャル流解析を組み合わせた、ハイブリッド法の目処がたちつつある。声帯の弾性体モデルに関しては、線形な2次元、もしくは3次元運動方程式を粒子法に基づいて数値解析する手法を検討する予定である。

  • Research Products

    (21 results)

All 2012 2011 Other

All Journal Article (5 results) (of which Peer Reviewed: 5 results) Presentation (16 results)

  • [Journal Article] A methodological and preliminary study on the acoustic effect of a trumpet player's vocal tract2011

    • Author(s)
      T.Kaburagi, N.Yamada, S.Fukui, E.Minamiya
    • Journal Title

      Journal of the Acoustical Society of America

      Volume: 130 Pages: 536-545

    • Peer Reviewed
  • [Journal Article] Analysing and understanding the singing voice : recent progress and open questions2011

    • Author(s)
      M.Kob, N.Henrich, H.Herzel, D.Howard, I.Tokuda, J.Wolfe
    • Journal Title

      Current Bioinformatics

      Volume: 6 Pages: 362-374

    • Peer Reviewed
  • [Journal Article] Mathematical Models and numerical schemes for the simulation of human phonation2011

    • Author(s)
      F.Alipour, C.Brucker, D.D.Cook, A.Gomel, M.Kaltenbacher, W.Mattheus, L.Mongeau, E.Nauman, R.Schwarze, I.Tokuda, S.Zorner
    • Journal Title

      Current Bioinformatics

      Volume: 6 Pages: 323-343

    • Peer Reviewed
  • [Journal Article] Subglottal pressure and fundamental frequency control in contact calls of juvenile Alligator mississippiensis2011

    • Author(s)
      T.Riede, I.Tokuda, C.G.Farmer
    • Journal Title

      Journal of Experimental Biology

      Volume: 214 Pages: 3082-3095

    • DOI

      doi:10.1242/jeb.051110

    • Peer Reviewed
  • [Journal Article] 日本語、中国語、朝鮮語における破裂子音生成の特徴分析

    • Author(s)
      鏑木時彦
    • Journal Title

      日本音響学会誌

      Volume: (採録決定)

    • Peer Reviewed
  • [Presentation] 病的発声におけるモードスイッチング現象に関する検討2012

    • Author(s)
      鏑木時彦, 朝井由紀恵
    • Organizer
      日本音響学会春季研究発表会
    • Place of Presentation
      神奈川県横浜市
    • Year and Date
      2012-03-13
  • [Presentation] 声区転換における音源-フィルタ相互作用の効果について2011

    • Author(s)
      鏑木時彦
    • Organizer
      日本音響学会音声研究会
    • Place of Presentation
      福岡県福岡市
    • Year and Date
      2011-11-29
  • [Presentation] 感度関数を用いたフォルマント周波数から声道形状への逆推定法の検討2011

    • Author(s)
      高野哲朗, 坂本優樹, 鏑木時彦
    • Organizer
      日本音響学会音声研究会
    • Place of Presentation
      福岡県福岡市
    • Year and Date
      2011-11-28
  • [Presentation] 調音データを用いた声道断面積関数の制御に関する検討2011

    • Author(s)
      毛利翔, 高野哲朗, 鏑木時彦
    • Organizer
      日本音響学会音声研究会
    • Place of Presentation
      福岡県福岡市
    • Year and Date
      2011-11-28
  • [Presentation] 病的発声の声帯振動におけるモードスイッチング現象について2011

    • Author(s)
      朝井由紀恵, 鏑木時彦
    • Organizer
      日本音響学会九州支部第9回学生のための研究発表会
    • Place of Presentation
      大分県大分市
    • Year and Date
      2011-11-26
  • [Presentation] モード展開法を用いた声道モデルにおける損失の評価2011

    • Author(s)
      坂尻勇人, 元木邦俊
    • Organizer
      電子情報通信学会第26回信号処理シンポジウム
    • Place of Presentation
      北海道札幌市
    • Year and Date
      2011-11-16
  • [Presentation] 母音発話時の皮膚近傍の粒子速度の測定2011

    • Author(s)
      高川昂太, 元木邦俊
    • Organizer
      平成23年度電気・情報関係学会北海道支部連合大会
    • Place of Presentation
      北海道函館市
    • Year and Date
      2011-10-23
  • [Presentation] FDTD法とモード展開法による管内音場の可視化2011

    • Author(s)
      菊地祐也, 坂尻勇人, 元木邦俊
    • Organizer
      平成23年度電気・情報関係学会北海道支部連合大会
    • Place of Presentation
      北海道函館市
    • Year and Date
      2011-10-23
  • [Presentation] Interactive processes underlying the production of voice2011

    • Author(s)
      T.Kaburagi
    • Organizer
      APSIPA ASC 2011
    • Place of Presentation
      Xian, China
    • Year and Date
      2011-10-20
  • [Presentation] Numerical simulation of acoustic characteristics of vocal-tract model with 3-D radiation and wall impedance2011

    • Author(s)
      H.Matsuzaki, K.Motoki
    • Organizer
      APSIPA ASC 2011
    • Place of Presentation
      Xian, China
    • Year and Date
      2011-10-20
  • [Presentation] 感度関数を用いた音響-調音逆推定法の検討2011

    • Author(s)
      高野哲朗, 坂本優樹, 鏑木時彦
    • Organizer
      日本音響学会秋季研究発表会
    • Place of Presentation
      島根県松江市
    • Year and Date
      2011-09-21
  • [Presentation] GPGPUを適用したFDTD(2,4)法による3次元声道音響数値解析2011

    • Author(s)
      紺野健幸, 松崎博季, 真田博文, 岡崎哲夫, 上野健治
    • Organizer
      日本音響学会秋季研究発表会
    • Place of Presentation
      島根県松江市
    • Year and Date
      2011-09-21
  • [Presentation] 発声における音源-フィルタ相互作用と声区転換2011

    • Author(s)
      鏑木時彦
    • Organizer
      日本音響学会秋季研究発表会
    • Place of Presentation
      島根県松江市
    • Year and Date
      2011-09-20
  • [Presentation] Reconstruction of three-dimensional laryngeal dynamics via stereo-matching technique2011

    • Author(s)
      I.Tokuda, M.Iwawaki, K.-I.Sakakibara, H.Imagawa, T.Nito, T.Yamasoba, N.Tayama
    • Organizer
      Nonlinear Theory and Its Applications
    • Place of Presentation
      兵庫県神戸市
    • Year and Date
      2011-09-05
  • [Presentation] Frequency-domain representation of source-filter coupling and its effect in the production of voice2011

    • Author(s)
      T.Kaburagi
    • Organizer
      INTERSPEECH2011
    • Place of Presentation
      Florence, Italy
    • Year and Date
      2011-08-30
  • [Presentation] FDTD法による3次元声道音響数値解析と解析結果の即時可視化2011

    • Author(s)
      紺野健幸, 松崎博季, 真田博文, 岡崎哲夫, 上野健治
    • Organizer
      日本音響学会アコースティックイメージング研究会
    • Place of Presentation
      北海道札幌市
    • Year and Date
      2011-08-05

URL: 

Published: 2013-06-26  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi