• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2016 年度 実績報告書

内発的表情の認識に基づく感情推定によるライフログ映像検索に関する研究

研究課題

研究課題/領域番号 15K15993
研究機関京都工芸繊維大学

研究代表者

野宮 浩揮  京都工芸繊維大学, 情報工学・人間科学系, 准教授 (80533116)

研究期間 (年度) 2015-04-01 – 2017-03-31
キーワードライフログ / 映像検索 / 感情推定 / 表情認識 / 表情強度
研究実績の概要

感情推定に基づいて、ライフログ映像から印象的なシーンを効率的に検索・提示するシステムを構築した。最終年度では、感情推定のための内発的表情認識および表情の強度推定に用いる特徴量(様々な顔特徴点の位置関係に基づくもの)を改善し、表情認識精度ならびに表情強度の推定精度を向上させた。また、前年度までは、表情認識・表情推定手法の評価において、笑顔のみを対象としていたが、新たにライフログ映像データセットを作成し、驚きなどの内発的表情も対象として、表情認識・表情推定手法の性能評価を行い、ある程度正確に表情認識と表情強度推定ができることを明らかにした。さらに、この表情認識・表情強度推定手法を用いて、ライフログ映像から多様な表情が様々な強さで表出しているシーンを検索するシステムを構築した。この検索システムは、手軽に利用できることを目的として、ウェブブラウザ上で動作するものとした。前述のライフログ映像データセット作成に参加した者により、構築したライフログ映像検索システムの評価を行った。その結果、システムの利用者が見たいと感じるシーンをある程度的確に提示できることを確認した。
以上により、期間全体として、本研究の目的である、内発的表情の正確な認識および強度推定、表情認識・強度推定手法を用いたライフログ映像からの印象的なシーンの検出、ライフログ映像検索システムの構築と評価をすべて行うことができた。ただし、評価実験を通じて、表情強度の推定精度やライフログ映像検索システムの使いやすさには改善の余地があることが明らかとなったため、これらは今後の研究において取り組む予定である。

  • 研究成果

    (4件)

すべて 2017 2016

すべて 雑誌論文 (3件) (うち査読あり 3件、 謝辞記載あり 3件) 学会発表 (1件)

  • [雑誌論文] Estimation of Emotional Scene from Lifelog Videos in Consideration of Intensity of Various Facial Expressions2017

    • 著者名/発表者名
      Shota Sakaue, Hiroki Nomiya, Teruhisa Hochin
    • 雑誌名

      Proc. of 18th IEEE/ACIS International Conference on Software Engineering, Artificial Intelligence, Networking and Parallel/Distributed Computing

      巻: 印刷中 ページ: 印刷中

    • 査読あり / 謝辞記載あり
  • [雑誌論文] Emotional Video Scene Retrieval System for Lifelog Videos Based on Facial Expression Intensity2017

    • 著者名/発表者名
      Mitsuaki Maeda, Hiroki Nomiya, Shota Sakaue, Teruhisa Hochin, Yukiko Nishizaki
    • 雑誌名

      Proc. of 18th IEEE/ACIS International Conference on Software Engineering, Artificial Intelligence, Networking and Parallel/Distributed Computing

      巻: 印刷中 ページ: 印刷中

    • 査読あり / 謝辞記載あり
  • [雑誌論文] Recognition and Intensity Estimation of Facial Expression Using Ensemble Classifiers2016

    • 著者名/発表者名
      Hiroki Nomiya, Shota Sakaue, Teruhisa Hochin
    • 雑誌名

      Proc. of 15th IEEE/ACIS International Conference on Computer and Information Science

      巻: 1 ページ: 825-830

    • DOI

      10.1109/ICIS.2016.7550861

    • 査読あり / 謝辞記載あり
  • [学会発表] 顔特徴点の位置変化による特徴量を用いた表情強度の推定2016

    • 著者名/発表者名
      阪上 翔太、野宮 浩揮、宝珍 輝尚
    • 学会等名
      情報処理学会
    • 発表場所
      大阪大学中之島センター(大阪府大阪市)
    • 年月日
      2016-09-26 – 2016-09-26

URL: 

公開日: 2018-01-16  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi