認知モデルと常識ベースに基づく情動を含む音声コミュニケーション
| Project/Area Number | 08F08049 |
|---|
| Research Category |
Grant-in-Aid for JSPS Fellows
|
| Allocation Type | Single-year Grants |
|---|
| Section | 外国 |
|---|
| Research Field |
Perception information processing/Intelligent robotics
|
|---|
| Research Institution | The University of Tokyo |
|---|
| Host Researcher |
広瀬 啓吉 The University of Tokyo, 大学院・情報理工学系研究科, 教授
|
|---|
| Foreign Research Fellow |
SHAIKH Mostata Al Masum 東京大学, 大学院・情報理工学系研究科, 外国人特別研究員
SHAIKH Mostafa Al Masum 東京大学, 大学院・情報理工学系研究科, 外国人特別研究員
|
|---|
| Project Period (FY) |
2008 – 2009
|
| Project Status |
Completed(Fiscal Year 2009)
|
| Budget Amount *help |
¥1,600,000 (Direct Cost : ¥1,600,000)
Fiscal Year 2009 : ¥800,000 (Direct Cost : ¥800,000)
Fiscal Year 2008 : ¥800,000 (Direct Cost : ¥800,000)
|
|---|
| Keywords | 情動・感性 / 認知モデル / 音声合成 / 韻律 / 基本周波数 / 発話速度 / 情動判別 / Life Logging / Support Vector Machine |
|---|
| Research Abstract |
昨年度、文の情動の程度を数値として表し、そこに含まれる感情の指標を抽出することを進めた。本年度は、その手法を高度化するとともに、得られる指標を合成音声に反映させることを中心に研究を進め、下記成果を達成した。
1.ニュース文について、動詞に着目して各句の肯定/否定の程度を評点として数値化した上で、順接、逆節といった句間の関係から、文全体の肯定/否定の程度を評点として与える手法を開発した。評点を用いて、英語音声合成フリーウェアのMARY音声合成システムの韻律を制御することを行った。お祭りのニュースなど、文内容が肯定的な場合は基本周波数/発話速度を上げ、事故のような、否定的な場合は、下げることを基本とする制御を行うことにより、文内容にふさわしい合成音声を得た。
2.認知モデルの立場から、喜び、悲しみなどの感情を、肯定/否定、興奮/抑制といった軸によって定式化し、文内容に含まれる感性情報を抽出する手法を開発した。肯定/否定、興奮/抑制の値によりMARY音声合成システムの韻律を制御することを行い、合成音声の聴取実験により抽出した感情が適切に反映されることを確認した。
3.音声からそこに含まれる情動/感性を抽出する手法について、音響部分の構築として、スペクトルの周波数と時間方向の変化の特徴と韻律的特徴を用い、Support Vector Machine等による判別を行うことで、定型文に限定されているが、肯定と否定の情動の判別率90%を達成した。
4.人間が生活する際に発生する種々の音から、人間の活動を推定する手法(Life Logging)の開発を進めた。音声認識で使われているMFCCを特徴量としたHMMを用いることで良好な音認識が可能なことを示した。
|
Report
(2results)
Research Products
(8results)
