• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

対話中の顔表情認識とその音声対話システムへの応用

研究課題

研究課題/領域番号 16700192
研究種目

若手研究(B)

配分区分補助金
研究分野 知覚情報処理・知能ロボティクス
研究機関早稲田大学

研究代表者

藤江 真也  早稲田大学, 理工学術院, 助手 (00367062)

研究期間 (年度) 2004 – 2005
研究課題ステータス 完了 (2005年度)
配分額 *注記
2,700千円 (直接経費: 2,700千円)
2005年度: 1,300千円 (直接経費: 1,300千円)
2004年度: 1,400千円 (直接経費: 1,400千円)
キーワード画像情報処理 / 知能ロボット / パターン認識
研究概要

<1.顔表情認識システムの構築>
昨年度の研究結果を踏まえ,本年度は,まず顔表情認識システムを構築した.認識対象とする表情としては,「笑顔」「しかめ」「見開き」と,平常を含む4表情とした.顔領域の中で,上記の表情で特に変化の大きかった眉間,眉毛を含む目,頬,口の部分画像を切り出し,主成分分析(PCA)や線形識別分析(LDA)などに基づき次元圧縮を施したベクトルを特徴量とし,サポートベクターマシンを用いて認識を行った,その結果,80%を超える認識率が得られた.
<2.顔方向・視線認識システムの構築>
上記に述べた顔表情システムは,基本的にユーザの顔が対話ロボットに正面を向けている場合を想定している.実際の対話では,ユーザの顔向きは様々に変化する.また,顔向きや視線はユーザとシステムとの間での発話権(発話の順番)のやり取りに大きな影響を与えるため,これらを認識することは顔表情と同様に適切な対話制御のために不可欠である.
本研究では,画像のテンプレートマッチングの一手法であるLucas-Kanadeアルゴリズムを用いて,顔画像テンプレートマッチング問題を3次元情報を考慮して解くことで顔向きの推定を行った.また,ここで得られた結果から目の部分面像を切り出し,PCAやLDAなどを用いて得られた特徴ベクトルを,部分空間法を用いた識別器にかけることによって視線認識を行った.これらの結果,顔向き認識は平均誤差約5度,視線認識は76%の認識率という結果が得られた.これらのリアルタイムのデモンストレーションをノートPC上に実装した.

報告書

(2件)
  • 2005 実績報告書
  • 2004 実績報告書
  • 研究成果

    (12件)

すべて 2005 2004

すべて 雑誌論文 (12件)

  • [雑誌論文] 対話調整的役割を果たす顔表情の認識2005

    • 著者名/発表者名
      中島慶, 藤江真也, 松坂要佐, 小林哲則
    • 雑誌名

      電子情報通信学会研究会技術報告 PRMU2005-94

      ページ: 7-12

    • NAID

      110003496736

    • 関連する報告書
      2005 実績報告書
  • [雑誌論文] Back-channel feedback generation using linguistic and nonlinguistic information and its application to spoken dialogue system2005

    • 著者名/発表者名
      Shinya Fujie, Kenta Fukushima, Tetsunori Kobayashi
    • 雑誌名

      Proc.Interspeech2005

      ページ: 889-892

    • 関連する報告書
      2005 実績報告書
  • [雑誌論文] 相槌生成/認識機能を持つ音声対話システム2005

    • 著者名/発表者名
      藤江真也, 福島健太, 三宅梨帆, 小林哲則
    • 雑誌名

      人工知能学会研究会資料 SIG-SLUD-A502-09

      ページ: 41-46

    • NAID

      40007193550

    • 関連する報告書
      2005 実績報告書
  • [雑誌論文] 音声対話システムにおける相槌認識/生成機能の言語情報と韻律情報による実現2005

    • 著者名/発表者名
      三宅梨帆, 福島健太, 藤江真也, 小林哲則
    • 雑誌名

      日本音響学会秋季研究発表会講演論文集

      ページ: 191-192

    • 関連する報告書
      2005 実績報告書
  • [雑誌論文] 肯定的/否定的発話態度の認識とその音声対話システムへの応用2005

    • 著者名/発表者名
      藤江真也, 江尻康, 菊池英明, 小林哲則
    • 雑誌名

      電子情報通信学会論文誌(D・II) vol.J88-D2, no.3

      ページ: 489-498

    • NAID

      110003203198

    • 関連する報告書
      2004 実績報告書
  • [雑誌論文] 対話型情報検索システムにおける提案要求表現の適当的理解2005

    • 著者名/発表者名
      細川健一郎, 藤江真也, 小林哲則
    • 雑誌名

      電子情報通信学会論文誌(D-II) vol.J88-D2, no.3

      ページ: 619-628

    • 関連する報告書
      2004 実績報告書
  • [雑誌論文] A Conversation Robot with Back-Channel Feedback Function based on Linguistic and Nonlinguistic Information2004

    • 著者名/発表者名
      Shinya Fujie, Kenta Fukushima, Tetsunori Kobayashi
    • 雑誌名

      Proc.Intl.Conf.on Autonomous Robots and Agents, ICARA2004

      ページ: 379-384

    • 関連する報告書
      2004 実績報告書
  • [雑誌論文] Prosody based Attitude Recognition with Feature Selection and Its Application to Spoken Dialog System as Para-Linguistic Information2004

    • 著者名/発表者名
      Shinya Fujie, Daizo Yagi, Hideki Kikuchi, Tetsunori Kobayashi
    • 雑誌名

      Proc.Intl.Conf.on Spoken Language Processing, ICSLP2004 vol.2

      ページ: 2841-2844

    • 関連する報告書
      2004 実績報告書
  • [雑誌論文] A Conversation Robot sing Head Gesture Recognition as Para-Linguistic Information2004

    • 著者名/発表者名
      S.Fujie, Y.Ejiri, K.Nakajima, Y.Matsusaka, T.Kobayashi
    • 雑誌名

      Proc.13th Intl.Workshop on Robot an Human Communication, RO-MAN 2004

      ページ: 159-164

    • 関連する報告書
      2004 実績報告書
  • [雑誌論文] 音声対話ロボットROBISUKEによる相談型対話の実現2004

    • 著者名/発表者名
      藤江真也, 坂本直宏, 清水健二, 宗近純一, 福島健太, 瀬戸裕介, 小林哲則
    • 雑誌名

      情報処理学会研究報告 SLP-53

      ページ: 55-56

    • NAID

      110002950572

    • 関連する報告書
      2004 実績報告書
  • [雑誌論文] FSTと韻律情報を用いた相槌・復唱機能を有する対話ロボット2004

    • 著者名/発表者名
      藤江真也, 福島健太, 柴田大輔, 小林哲則
    • 雑誌名

      人工知能学会研究会資料 SIG-SULD-A401

      ページ: 15-20

    • 関連する報告書
      2004 実績報告書
  • [雑誌論文] 相槌・復唱機能を持つ対話システム2004

    • 著者名/発表者名
      福島健太, 藤江真也, 柴田大輔, 小林哲則
    • 雑誌名

      日本音響学会秋季研究発表会講演論文集

      ページ: 139-140

    • 関連する報告書
      2004 実績報告書

URL: 

公開日: 2004-04-01   更新日: 2016-04-21  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi