2011 Fiscal Year Annual Research Report
温度画像処理と音声認識による実環境における表情認識に関する研究
| Project/Area Number |
22300077
|
|---|
| Research Institution | Kyoto Prefectural University |
|---|
Principal Investigator |
吉冨 康成 京都府立大学, 生命環境科学研究科, 教授 (70274769)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
田伏 正佳 京都府立大学, 生命環境科学研究科, 准教授 (10244188)
|
|---|
| Keywords | 表情認識 / 温度画像 / 音声認識 / 母音認識 / 正面判定 |
|---|
| Research Abstract |
「表情を認識する介護ロボット」、「1人暮らしの話し相手ロボット」の人間状態認識部の開発の礎を築くため、「温度画像処理と音声認識による実環境における表情認識に関する研究」を行う。これまで開発してきた種々の手法をベースとしてシステムを構築し実環境での「任意の発話時」の表情認識を行い、実用化への課題の抽出と対策の立案を行うことを研究目的としている。
被験者が「正面」を向いた状態で、音声認識システムJuliusを用いて、種々の1単語で音声認識を行い、発声の際の3つのタイミング(「発声直前」、「発声開始直後の母音発声」、「発声終了直前の母音発声」)の顔温度画像3つ1組の学習データを作成する。そして、被験者が「正面」を向いた状態の1単語の発声時の表情認識を行う。被験者を1～5名とし、対象とする表情パターンは、「喜び」、「悲しみ」、「驚き」、「怒り」、「無表情」の5つとする。
具体的な研究実積は以下のとおり。
(1)1単語発声時の表情認識における学習データの有効性の経時劣化の対策の検討を行い、いずれの被験者に対しても、「喜び」と「無表情」を追加学習することが表情認識精度を確保するのに有効であることを示した。
(2)音声認識失敗時の表情認識への影響調査を行い、大きな影響を及ぼしていないことを明らかにした。
(3)既開発のオフラインシステムをベースに、オンライン表情認識システムを開発した。そのシステムは、3つのパソコンをイーサーネットで接続したものである。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
研究の目的を達成するため、(1)1単語発声時の表情認識における学習データの有効性の経時劣化の対策の検討、(2)音声認識失敗時の表情認識への影響調査とその対策の検討、(3)オンライン処理化、の3つを計画した。このうち、(1)は順調に進展し、(2)はやや遅れているが、(3)は当初の計画以上に進展している。このため、総合的にみて、概ね順調に進展している。
|
| Strategy for Future Research Activity |
研究の目的を達成するため、以下の2点を進める。
(1)1単語発声時の表情認識における学習データの有効性の経時劣化の対策の検討
1つの単語を用い、学習データを作成し、表情認識を行う。その際、学習データの有効性の経時劣化の対策を検討する。
(2)音声認識失敗時の表情認識への影響調査とその対策の検討
母音のすべての組合せである5×5=25とおりの単語を用い、学習データを作成し、音声認識失敗時の表情認識への影響調査とその対策の検討を行う。
|
Research Products
(8 results)
