感情音声の異文化間比較-調音音声学的・言語学的分析

2009 年度 実績報告書

• 研究課題/領域番号: 19520371
• 研究機関: 昭和音楽大学
• 研究代表者: ERICKSON Donna 昭和音楽大学, 音楽学部, 教授 (80331586)
• キーワード: 音声学 / 言語学 / 韻律 / 感情言語 / 調音

研究概要

異言語、異文化をもつ話者の感情音声(emotional speech)の生成過程の発見をテーマに研究を進めた。今回、実験の対象とした言語はアメリカ英語、日本語、ロシア語である。
1.アメリカ英語、日本語、韓国語を対象とし、EMA(Electro-Magnetic Articulograph)実験を実施した。この実験では、被験者と対話相手が隔離された部屋に入り、マイクロフォン、イアフォンを用いて自然な形式で対話を行った。会話の内容は、被験者の私生活に関して、特に感情を呼び起こす事柄をテーマとし、リハーサル抜きで行った。
2.ロシア語を対象とし、ラメント(lament)に関する研究を数多く発表しているロシアの民族音楽学者に依頼し、自然発話と歌唱及びそれらをラメントした(悲嘆の声で発声すること)時の録音を行い、EMAを採取したほか、声帯の高速イメージングの実験も合わせて行った。
[結果]
アメリカ英語では、悲嘆の声、喜びの声はいずれも上唇を後退・上昇させて生成され、また呼気の上昇に伴う高音によって特徴づけられる。また悲嘆の声では第4フォルマント周波数が下降し、これは喉頭の下降を示唆している。ロシアの悲嘆のラメントでは、最後の息を吸い、すすり泣く部分で、眉をひそめ、同時に上唇を後退させる。これはアメリカ英語、日本語の悲嘆の声でも見られる。韓国語の悲嘆の声はbreathyであり、怒りの発声と比べると柔らかく、また低音である。本研究では、自然な感情音声に関する調音データを収集しているので、体系的なコーパスを蓄積することはできない。しかしこのようなデータベースが斯界で活用され、感情音声の生成メカニズムの解明に貢献することが期待される。

研究成果

• [雑誌論文] Comparison between linguistic and affective perception of sad & happy-A cross-linguistic study (2010)
  • 著者名/発表者名: Menezes, C., Erickson, D., Franks, C.
  • 雑誌名: Speech Prosody 2010 ページ: 2a-26
  • 査読あり
• [雑誌論文] Perception by Japanese, Korean and American listeners to a Korean speaker's recollection of past emotional events : Some acoustic cues. (2010)
  • 著者名/発表者名: Erickson, D.
  • 雑誌名: Speech Prosody 2010 ページ: 2a-11
  • 査読あり
• [雑誌論文] An articulatoryaccount of rhythm, prominence & phrasal articulation (2010)
  • 著者名/発表者名: Erickson, D.
  • 雑誌名: Speech Prosody 2010 ページ: W1-05
  • 査読あり
• [雑誌論文] Effect of language knowledge on perception of emotional utterances. (2010)
  • 著者名/発表者名: Erickson, D., Menezes, C., Rilliard, Shochi, T.
  • 雑誌名: Interspeech 2010
  • 査読あり
• [雑誌論文] Ah, how sweet the sound : Some acoustic characteristics of emotionally sung/ah/. (2010)
  • 著者名/発表者名: Erickson, D., Suzuki, T., Tanosaki, K., Yahiro, K., Haneishi, E., Kishimoto, H.
  • 雑誌名: Intersinging 2010
  • 査読あり
• [雑誌論文] Vocal fold vibration in lamenting, speaking and singing. (2010)
  • 著者名/発表者名: Mazo, M., Sakakibara, K., Imagawa, H., Tayama, N., Erickson, D.
  • 雑誌名: Intersinging 2010
  • 査読あり
• [雑誌論文] Differences in jaw, tongue, & lip articulation in lamenting, speaking and singing (2010)
  • 著者名/発表者名: Mazo, M., Erickson, D.
  • 雑誌名: The 4^<th> World Voice Congress
  • 査読あり
• [雑誌論文] Multimodal fEEG and fNIRS analysis of human emotional responses. (2010)
  • 著者名/発表者名: Rutkowski, T., Cichocki, A., Erickson, D., Tanaka, T., Mandic
  • 雑誌名: Neuroscience Research, Abstracts of the 32nd Annual Meeting of the Japan Neuroscience Society 6.1 ページ: S130
  • 査読あり
• [雑誌論文] An acoustical study of singing formants in female voices : Part I (2009)
  • 著者名/発表者名: Erickson, D., Saitou, T., Hosokawa, K., Kishimoto, H., Haneishi, E.
  • 雑誌名: 昭和音楽大学紀要 ページ: 13-26
  • 査読あり
• [雑誌論文] EEG dynamics of auditory and visually presented affective speech : Preliminary results (2009)
  • 著者名/発表者名: Erickson, D., Rutkowski, T, Cichocki, A.
  • 雑誌名: International Symposium on Biomechanical and Physiological Modeling and Speech Science, Feb.20-22, Kanazawa, Japan ページ: 63-67
• [雑誌論文] Perception by Japanese and Korean listeners to a Korean speaker's recollection of past emotional events : Some acoustic cues. (2009)
  • 著者名/発表者名: Erickson, D., Oomae, T., Tanaka, Y.
  • 雑誌名: Proc.ASJ '2009 Fall Meeting ページ: 499-502
• [雑誌論文] Comparison of emotion perception among different cultures (2009)
  • 著者名/発表者名: Dang, J., Li, A., Erickson, D., Suemitsu, A., Akagi, M., Sakuraba, K., Minematsu, N., Hirose, K.
  • 雑誌名: APSIPA2009 ページ: 538-544
  • 査読あり
• [雑誌論文] Are you laughing, smiling or crying? (2009)
  • 著者名/発表者名: Erickson, D.Menezes, C., Sakakibara, K.
  • 雑誌名: APSIPA2009 ページ: 530-537
  • 査読あり
• [雑誌論文] Japanese children's acquisition of prosodic politeness expressions (2009)
  • 著者名/発表者名: Shochi, T., Erickson, D., Sekiyama, K., Rilliard, A., Auberge, V.
  • 雑誌名: InterSpeech2009 ページ: 1743-1746
  • 査読あり
• [雑誌論文] Comparison between Japanese children and adult perception of prosodic politeness expressions. (2009)
  • 著者名/発表者名: Shochi, T., Erickson, D., Rilliard, A., Sekiyama, K., Auberge, V.
  • 雑誌名: Acoustical Society of American ページ: 2754-5
• [雑誌論文] Some preliminary Observations about articulatory, acoustic and perceptual characteristics of laugh and smile speech in comparison with sad and neutral speech.
  • 著者名/発表者名: Erickson, D., Shochi, T., Menezes, C., Dang, J.
  • 雑誌名: Mouton de Gruyter, Special Issue on Laughing. conditional accept
  • 査読あり
• [雑誌論文] Comparison of emotion perception among different cultures.
  • 著者名/発表者名: Dang, J, Li, A., Erickson, D., Suemitsu, A., Akagi, M., Sakuraba, K., Minematsu, N., Hirose, K.
  • 雑誌名: Acoustical Science and Technology. conditional accept
  • 査読あり
• [雑誌論文] Comparison of Japanese expressive speech perception by Mandarin and Japanese listeners.
  • 著者名/発表者名: Huang, C-F., Erickson, D., Akagi, M.
  • 雑誌名: J.Phonetics. conditional accept
  • 査読あり
• [学会発表] An articulatory account of rhythm, prominence and phrasal organization. (2010)
  • 著者名/発表者名: Erickson, D.
  • 学会等名: Sophia University Linguistics Club
  • 発表場所: Tokyo
  • 年月日: 2010-01-27
• [学会発表] About phonetic and perceptual similarities in laughing, smiling, and crying speech. (2009)
  • 著者名/発表者名: Erickson, D., Menezes, C., Sakakibara, K.
  • 学会等名: Acoustical Society of America
  • 発表場所: San Antonio, Texas, USA
  • 年月日: 20091026-20091030
• [学会発表] Comparison of emotion perception among different cultures (2009)
  • 著者名/発表者名: Dang, J., Li, A., Erickson, D., Suemitsu, A., Akagi, M., Sakuraba, K., Minematsu, N., Hirose, K.
  • 学会等名: APSIPA2009
  • 発表場所: Sapporo
  • 年月日: 20091004-20091007
• [学会発表] Are you laughing, smiling or crying? (2009)
  • 著者名/発表者名: Erickson, D.Menezes, C., Sakakibara, K.
  • 学会等名: APSIPA2009
  • 発表場所: Sapporo
  • 年月日: 20091004-20091007
• [学会発表] Interactive components extraction from fEEG and fNIRS for affective brain machine interfacing paradigms (2009)
  • 著者名/発表者名: Rutkowsk, T.M., Tanaka, T.Cichocki, A., Erickson, D., Mandic, D.
  • 学会等名: Fifth International Conference on Intelligent Computing(ICIC2009)
  • 発表場所: Ulsan, Korea
  • 年月日: 20090916-20090919
• [学会発表] Perception by Japanese and Korean listeners to a Korean speaker's recollection of past emotional events : Some acoustic cues. (2009)
  • 著者名/発表者名: Erickson, D., Oomae, T., Tanaka, Y.
  • 学会等名: Acoustical Society of Japan Fall Meeting
  • 発表場所: Koriyama
  • 年月日: 20090915-20090917
• [学会発表] Japanese children's acquisition of prosodic politeness expressions (2009)
  • 著者名/発表者名: Shochi, T., Erickson, D., Sekiyama, K., Rilliard, A., Auberge, V.
  • 学会等名: Interspeech2009
  • 発表場所: Brighton, England
  • 年月日: 20090600-20091000
• [学会発表] How Emotion affects Voices. (2009)
  • 著者名/発表者名: Erickson, D.
  • 学会等名: School of Music, The Ohio State University
  • 発表場所: Columbus, Ohio, USA
  • 年月日: 2009-10-26
• [学会発表] Are you laughing, smiling or crying. (2009)
  • 著者名/発表者名: Erickson, D.
  • 学会等名: Alfred I.duPont Hospital for Children Nemours Center
  • 発表場所: Wilmington, DE, USA
  • 年月日: 2009-05-28
• [学会発表] Comparison between Japanese children and adult perception of prosodic politeness expressions. (2009)
  • 著者名/発表者名: Shochi, T., Erickson, D., Rilliard, A., Sekiyama, K., Auberge, V.
  • 学会等名: Acoustical Society of America
  • 発表場所: Portland, OR, USA
  • 年月日: 2009-05-27
• [学会発表] 感情を込めて歌ったり話したりするとき、どのように思いを表現するのでしょうか? (2009)
  • 著者名/発表者名: Erickson, D.
  • 学会等名: 昭和音楽大学音声学の共同研究
  • 発表場所: 川崎市
  • 年月日: 2009-05-22
• [図書] 「パラ言語情報にみられる異文化間の知覚の相違」林博司,定延利之(編)『コミュニケーション、どうする?どうなる?』 (2010)
  • 著者名/発表者名: エリクソン、ドナ, 昇地, 崇明, 林, 定延(編集者)
  • 総ページ数: 16
  • 出版者: ひつじ書房,東京
• [図書] Intercultural Perception of English, French and Japanese Social Affective Prosody. Affective Prosody (2009)
  • 著者名/発表者名: Shochi, T., Rilliard, A., Auberge, V.Erickson, D.
  • 総ページ数: 32
  • 出版者: (ed.)M.Gotti, series : Linguistic Insights, Peter Lang Publishing Group, New York, Bern, Berlin, Bruxelles, Frankfurt am Main, Oxford, Wien.
• [図書] 「日・英語母語者による感情音声知覚の比較-基周波数以外の音響的特徴から得られる情報に注目して-」『文法と音声』音声文法研究会編 (2009)
  • 著者名/発表者名: エリクソン、ドナ, 昇地, 崇明、メネゼス、キャロリーヌ、川原秀紀、リリヤール, アルベール
  • 総ページ数: 12
  • 出版者: くろしお出版,大阪.