• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2018 年度 実績報告書

没入型バーチャルリアリティ環境における表情認識技術の構築

研究課題

研究課題/領域番号 16H05870
研究機関慶應義塾大学

研究代表者

杉本 麻樹  慶應義塾大学, 理工学部(矢上), 准教授 (50517399)

研究期間 (年度) 2016-04-01 – 2020-03-31
キーワード表情認識 / 反射型光センサ / 機械学習
研究実績の概要

研究期間の3年次にあたる本年度は,2年次に引き続き組み込み型光センサから取得できる情報から装着者の顔表情の幾何推定がどの程度の精度できるかを定量的に検討することを持続するとともに,表情識別のための訓練データを視線方向毎に取得することによって推定の精度が向上するかについて検討を行った.また,国内展示会での実演展示を通じて,研究成果を多数の研究者や一般の来場者に体験する機会を設けて,アウトリーチ活動を進めた.
これまでの研究期間において,頭部装着型ディスプレイを装着したユーザの表情を識別する組み込み型光センサと機械学習のシステムを構築しており,感情に対応した基本表情毎の識別と,表情の表出強度の推定を行ってきた.これらの研究の過程において,頭部の向きや視線方向等が基本表情の識別精度に影響を与えるという知見が得られている.定量的にこの影響を検討するための試みとして,頭部装着型ディスプレイ内部で提示する視覚情報として,視線方向毎に注視指標を提示し,視線方向を統制した条件において反射型光センサの情報を取得した.取得したデータから本表情の識別器を訓練する際に用いるデータとテストデータを,単一の視線方向のデータのみ用いた条件・各方向の視線方向のデータを用いた条件・全方向の視線方向のデータを同一に取り扱った条件において識別精度がどのように変化するかを検討した. この検討の結果として,視線方向が大きく変化する条件において良好な基本表情の識別率を得るためには,視線方向毎の訓練データを持つことで,単一の視線方向のデータのみを用いた条件より良好な識別率が得られることを確認した.

現在までの達成度 (区分)
現在までの達成度 (区分)

1: 当初の計画以上に進展している

理由

現在までの研究の進捗状況としては,当初の研究計画以上に進展していると考えられる.これは,研究開始時においては,本研究で使用している反射型光センサの情報に基づいて笑い・驚き・怒り・悲しみ・ニュートラルといった基本表情を前提とした表情識別が可能であると考えていたが,本研究の実施を通じて,主成分を踏まえた幾何推定が可能であることを示せている.また頭部方向や視線などによる認識精度への影響を定量的に明らかにすることにより,表情以外のパラメータがどの程度識別精度に影響を与えるかを検証することを進められており,当初の研究計画以上に研究が進展している状況である.

今後の研究の推進方策

研究期間の4年次においては,国際会議等における実演展示を通じて,アウトリーチ活動を行うとともに,多数のユーザの表情データを取得することによって,個人毎の訓練データの有無に応じた識別精度についての検討を進める.また,今後の研究の発展のため,表情の変化を時間的に捉えて学習することや,転移学習などの機械学習手法の活用による精度向上・訓練データの取得の簡素化が可能かについても基礎的な知見を獲得するための検討を行う.

  • 研究成果

    (2件)

すべて 2018

すべて 雑誌論文 (1件) (うち査読あり 1件) 学会発表 (1件)

  • [雑誌論文] 反射型光センサを用いた眼鏡型ウェアラブルデバイスによる顔表情パフォーマンスキャプチャ2018

    • 著者名/発表者名
      浅野 直生, 正井 克俊, 杉浦 裕太, 杉本 麻樹
    • 雑誌名

      日本バーチャルリアリティ学会論文誌

      巻: 23 ページ: 197-206

    • DOI

      https://doi.org/10.18974/tvrsj.23.3_197

    • 査読あり
  • [学会発表] 頭部装着型ディスプレイにおける視線を考慮した表情認識の検討2018

    • 著者名/発表者名
      村上雅明,正井克俊,杉浦裕太,杉本麻樹
    • 学会等名
      第 23 回日本バーチャルリアリティ学会大会

URL: 

公開日: 2019-12-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi