• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2023 Fiscal Year Research-status Report

Speech-laughの発生機序の解明

Research Project

Project/Area Number 22K18477
Research InstitutionChiba Institute of Technology

Principal Investigator

有本 泰子  千葉工業大学, 情報科学部, 准教授 (60586957)

Co-Investigator(Kenkyū-buntansha) 森 大毅  宇都宮大学, 工学部, 准教授 (10302184)
Project Period (FY) 2022-06-30 – 2025-03-31
Keywordsspeech-laugh / 音響分析 / フォルマント周波数 / ケプストラム分析
Outline of Annual Research Achievements

speech-laughの発生機序を明らかにすることを目的とし,speech-laugh 発生時の声道特性を表す二種類の特徴量を用いてspeech-laugh冒頭と発話に含まれる音素の音響特性の違いを検証した.フォルマント分析の結果,/a/, /e/, /o/の母音はspeech-laugh 冒頭の方が発話に含まれる音素の方がF1 およびF2 の値が大きかった.メルケプストラムを使用した一般化線形混合モデルによる分析の結果,低次元のケプストラム係数が発話とspeech-laugh を区別することに貢献することが分かった.
また,これまでに行なってきた音声学的分析に関しても,日常会話コーパス(CEJC)を利用して対話ドメインを拡張し,更なる分析を実施した。463 名(延べ人数)の会議会合場面および雑談対話場面のspeech-laugh ラベリング分節音ラベリング(MFA 使用後,手修正)を行ったのち,speech-laugh冒頭の音素を対象に統計的仮説検定を用いた分析を行った。その結果,歯茎破裂音sでspeech-laughが始まることが多いこと,雑談場面では歯茎付近の狭め(/d/, /t/, /z/, /n/)で,会議会合場面では声門(/h/) や両唇(/p/, /h/) での狭めでspeech-laughが生じやすいことが分かった。
本研究に関連する成果として,査読付き学術雑誌で2件の論文を発表した。それ以外にも,査読付き国際会議で2件,国内学会で招待講演を2件,国内学会で10件の発表がある。また,国内で発表した3件の研究に対して,その研究内容および独創性が評価され学会より賞を授与された。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

言語普遍性の検証を可能とするため,日本語とそれ以外の対話コーパスを対象とする予定であったが,外国語の自発対話音声を入手することが困難であり,実現できていない。2022年度は,その分を年代を拡張して,20代から70代までのspeech-laughラベリングを実施した。2023年度は,現象のドメイン・依存性を確認するため,419名の大規模な音声資料を利用した分析を実施した。また,音響分析も着実に実施しており,成果を出している。そのため,概ね順調に進展している。

Strategy for Future Research Activity

Speech-laugh の発生規則がspeech-laugh らしさに影響しているかどうかを検証するために,speech-laugh合成を実施する。合成したspeech-laughに対し,主観評価実験を実施して,その自然性を評価する。

Causes of Carryover

初年度に新型コロナウィルス感染予防対策のため,海外渡航規制が出ており,国際会議に参加するための渡航費を使用することができなかったこと,外国語のコーパスを購入することができなかったことにより,次年度使用額が継続的に生じている。2024年度も引き続き外国語コーパスの購入を検討するとともに,研究発表にかかる費用,および音声合成に必要な機材の購入費として使用する予定である。

  • Research Products

    (15 results)

All 2025 2024 2023

All Journal Article (4 results) (of which Peer Reviewed: 4 results,  Open Access: 4 results) Presentation (11 results) (of which Invited: 2 results)

  • [Journal Article] Determining the base frequency of the F0 contour generation model for the diverse expression of speech,” Acoustical Science and Technology2025

    • Author(s)
      Yoshiko Arimoto, Yasuo Horiuchi, Sumio Ohno
    • Journal Title

      Acoustical Science and Technology

      Volume: 1 Pages: -

    • Peer Reviewed / Open Access
  • [Journal Article] Acoustic differences between laughter and screams in spontaneous dialog2024

    • Author(s)
      Matsuda Takuto、Arimoto Yoshiko
    • Journal Title

      Acoustical Science and Technology

      Volume: 45 Pages: 135~146

    • DOI

      10.1250/ast.e23.58

    • Peer Reviewed / Open Access
  • [Journal Article] Detection of Laughter and Screaming Using the Attention and CTC Models2023

    • Author(s)
      Matsuda Takuto、Arimoto Yoshiko
    • Journal Title

      Proceedings of Interspeech2023

      Volume: - Pages: 1025-1029

    • DOI

      10.21437/Interspeech.2023-1412

    • Peer Reviewed / Open Access
  • [Journal Article] A Generative Framework for Conversational Laughter: Its 'Language Model' and Laughter Sound Synthesis2023

    • Author(s)
      Mori Hiroki、Kimura Shunya
    • Journal Title

      Proceedings of Interspeech2023

      Volume: - Pages: 3372--3376

    • DOI

      10.21437/Interspeech.2023-2453

    • Peer Reviewed / Open Access
  • [Presentation] 日常会話コーパスを利用したspeech-laughの冒頭音素の対話ドメイン比較2024

    • Author(s)
      有本泰子, 神津宏尚
    • Organizer
      国立国語研究所「日常会話コーパス」シンポジウム IX,
  • [Presentation] メルケプストラムを利用したspeech-laugh冒頭音素の音響分析2024

    • Author(s)
      瀬戸口遼, 有本泰子
    • Organizer
      日本音響学会2024年春季研究発表会講演論文集
  • [Presentation] クラウドソーシングを利用した叫び声に対する感情次元評価2024

    • Author(s)
      大石暖, 大久保港, 有本泰子
    • Organizer
      日本音響学会2024年春季研究発表会講演論文集,
  • [Presentation] 共起笑いの音響分析と生理反応への影響2024

    • Author(s)
      飯田真広, 有本泰子
    • Organizer
      日本音響学会音声研究会(ASJ-SP)資料
  • [Presentation] wav2vec 2.0 を用いた笑い声・叫び声検出が可能な音声認識2024

    • Author(s)
      松田匠翔, 有本泰子
    • Organizer
      日本音響学会音声研究会(ASJ-SP)資料
  • [Presentation] 音声合成用コーパスおよび日常会話コーパスのハイブリッドモデリングによる日常会話音声の合成2024

    • Author(s)
      古川 晃大,森 大毅
    • Organizer
      日本音響学会2024年春季研究発表会
  • [Presentation] 笑い声に応答するゲームシステムの開発に向けたイベント呈示の生理学的評価2023

    • Author(s)
      倉澤瑞, 福田樹人, 有本泰子
    • Organizer
      人工知能学会言語・音声理解と対話処理研究会(SIG-SLUD)第99回研究会「第14回対話システムシンポジウム」
  • [Presentation] speech-laugh の発生機序解明に向けた冒頭母音の音響分析2023

    • Author(s)
      瀬戸口遼, 有本泰子
    • Organizer
      日本音響学会2023年秋季研究発表会講演論文集
  • [Presentation] 自発的な笑い声と叫び声が検出可能なEnd-to-End 音声認識の検討2023

    • Author(s)
      松田匠翔, 有本泰子
    • Organizer
      日本音響学会2023年秋季研究発表会講演論文集
  • [Presentation] 情動発声研究のその先に:笑い声・叫び声の認識・合成,そしてインタラクション2023

    • Author(s)
      有本泰子
    • Organizer
      日本音響学会2023年秋季研究発表会講演論文集
    • Invited
  • [Presentation] 会話エージェントは,いつ,どのように笑うべきか: ヒトの笑い声研究からの示唆2023

    • Author(s)
      森 大毅
    • Organizer
      日本音響学会2023年秋季研究発表会
    • Invited

URL: 

Published: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi