発話音声に伴う頭部動作および表情と言語・パラ言語情報との関連構造の構築

2010 年度 研究成果報告書

• 研究課題/領域番号: 20680011
• 研究種目: 若手研究(A)
• 配分区分: 補助金
• 研究分野: 知覚情報処理・知能ロボティクス
• 研究機関: 株式会社国際電気通信基礎技術研究所
• 研究代表者: 石井 カルロス寿憲 株式会社国際電気通信基礎技術研究所, 知能ロボティクス研究所, 研究員 (30418529)
• 研究期間 (年度): 2008 – 2010
• キーワード: 音声情報処理 / 非言語情報

研究概要

本研究課題では,対話コミュニケーションにおいて,発話音声とそれに伴う頭部動作や表情の視覚的情報との関連構造を提案し,言語情報と韻律・声質特徴からなる発話スタイルの組み合わせにより,談話機能や発話意図などを介して頭部動作や表情の視覚的情報と関連付ける構造を解明した。主な成果として、「気息音」と「りきみ」の声質が対話でもたらす機能を明らかにし、談話機能と頭部動作との関連を解明した結果、発話に伴う頷きと首かしげの動作生成モデルを提案し、有効性を評価した。

研究成果

• [雑誌論文] Analysis of the roles and the dynamics of breathy and whispery voice qualities in dialogue speech. (2010)
  • 著者名/発表者名: Ishi, C.T., Ishiguro, H., Hagita, N.
  • 雑誌名: EURASIP Journal on Audio, Speech, and Music Processing 2010 ID 528193 ページ: 1-12
• [学会発表] Acoustic, electroglottographic and paralinguistic analyses of "rikimi" in expressive speech (2010)
  • 著者名/発表者名: Ishi, C., Ishiguro, H., Hagita, N.
  • 学会等名: Proceedings of Speech Prosody 2010 (SP2010)(ID 100139, 1-4)
  • 年月日: 20100000
• [学会発表] Head motion during dialogue speech and nod timing control in humanoid robots (2010)
  • 著者名/発表者名: Ishi, C.T., Liu, C., Ishiguro, H., Hagita, N.
  • 学会等名: Proceedings of IEEE/RSJ Human Robot Interaction (HRI 2010)(293-300)
  • 年月日: 20100000
• [学会発表] Analysis of inter- and intra-speaker variability of head motions during spoken dialogue (2008)
  • 著者名/発表者名: Ishi, C.T., Ishiguro, H., Hagita, N.
  • 学会等名: Proceedings of the International Conference on Auditory-Visual Speech Processing 2008 (AVSP' 2008)(37-42)
  • 年月日: 20080000
• [学会発表] The meanings of interjections in spontaneous speech (2008)
  • 著者名/発表者名: Ishi, C.T., Ishiguro, H., Hagita, N.
  • 学会等名: Proceedings of The 9th Annual Conference of the International Speech Communication Association (Interspeech' 2008)(1208-1211)
  • 年月日: 20080000
• [学会発表] The roles of breathy/whispery voice qualities in dialogue speech (2008)
  • 著者名/発表者名: Ishi, C.T., Ishiguro, H., Hagita, N.
  • 学会等名: Proceedings of Speech Prosody 2008(45-48)
  • 年月日: 20080000