• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

測定条件に対して頑健な眼球運動測定手法の検討

Research Project

Project/Area Number 21K03143
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 10040:Experimental psychology-related
Research InstitutionEhime University

Principal Investigator

十河 宏行  愛媛大学, 法文学部, 教授 (90359795)

Project Period (FY) 2021-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥3,250,000 (Direct Cost: ¥2,500,000、Indirect Cost: ¥750,000)
Fiscal Year 2023: ¥520,000 (Direct Cost: ¥400,000、Indirect Cost: ¥120,000)
Fiscal Year 2022: ¥130,000 (Direct Cost: ¥100,000、Indirect Cost: ¥30,000)
Fiscal Year 2021: ¥2,600,000 (Direct Cost: ¥2,000,000、Indirect Cost: ¥600,000)
Keywordseye tracking / web camera / head free / 眼球運動 / アイトラッカー / オープンソース / eye tracker / video-based eyetracking
Outline of Research at the Start

ビデオ画像に基づいた視線計測にはさまざまな応用が期待されるが、測定装置が高価であることや扱いが難しいことなどから普及していない。webカメラ等の低価格のカメラを用いた場合、レンズの性能や解像度などの問題から眼球運動測定に十分な画質が得られないことが多い。本研究では、画質が高い時には高精度で、画質が低い場合でも画質に応じた精度で眼球運動を測定するソフトウェアの開発を目指す。

Outline of Annual Research Achievements

本年度は昨年度に続いて3Dモデルを用いて作成した顔画像を用いた評価実験と、アプリケーションのユーザーインターフェスの向上に取り組んだ。評価実験では、従来観察距離100cmを仮定していたが、40cmの条件を追加して正確な顔の特徴点座標があれば回転角度0.02±1.82deg、平行移動0.83±2.82mm、日本人成人平均の特徴点座標を用いた場合でも回転角度-2.87±5.12deg、平行移動-1.84±5.27mmという精度を達成できることを確認した(3軸の平均、誤差は標準偏差)。また、虹彩位置検出精度の評価方法を改善し、矩形の4隅と中心の5点でキャリブレーションを行い、矩形内の17×5点に視線を向けるという手続きの実験を行った際の眼球運動をシミュレートした顔画像を作成した。これらの画像に対して開発したアプリケーションでキャリブレーションと視線測定を行った。その結果、虹彩検出にアンサンブル回帰木を用いる方法では約4度、セマンティックセグメンテーションを行うニューラルネットワークであるENetを用いる方法では約1.5度の誤差で視線方向を推定できることが示された。さらに、キャリブレーションを行った時の頭部位置から頭部を3軸で回転させてターゲットに視線を向けるという状況をシミュレートした顔画像を作成し、顔の移動が測定精度に及ぼす影響を評価した。ユーザーインターフェースの改善については、複数の動画ファイルに対して一括して処理するバッチモードおよびデータの出力機能を実装した。

Current Status of Research Progress
Current Status of Research Progress

4: Progress in research has been delayed.

Reason

本務校の業務負担の増加、および別プロジェクトのアプリケーション開発に時間をとられたことにより、本プロジェクトに割ける時間が計画より減少したことが最大の理由である。また、現在はEnetによる虹彩検出機能をTensorFlowにより実装しているが、本プロジェクトの成果であるアプリケーションの公開時にはTensorFlowを必要としないようリファクタリングすることを計画し、そのために新たなフレームワークの導入を検討したことも遅延の原因となっている。

Strategy for Future Research Activity

TensorFlowに依存しないリファクタリングは研究期間中に完了の見通しが立たないため、現状のアプリケーションで今年度までに行った評価実験の結果をまとめて発表を行う。論文の受理が研究期間終了に間に合わない場合でも、開発したアプリケーションはGitHub上で公開する。

Report

(3 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • 2021 Research-status Report
  • Research Products

    (5 results)

All 2023 2022 Other

All Presentation (3 results) (of which Invited: 1 results) Remarks (2 results)

  • [Presentation] Webカメラを用いた顔の6D姿勢および虹彩位置の測定2023

    • Author(s)
      十河宏行
    • Organizer
      日本心理学会第87回大会
    • Related Report
      2023 Research-status Report
  • [Presentation] Webカメラで視線測定 ―何が難しいのか?―2023

    • Author(s)
      十河宏行
    • Organizer
      第53回知覚コロキウム
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] Webカメラを用いた 顔方向および 視線方向測定―赤外線照明なし・Pythonベースでどこまでできるか?―2022

    • Author(s)
      十河宏行
    • Organizer
      日本心理学会第86回大会
    • Related Report
      2022 Research-status Report
  • [Remarks] GazeParser project page (GitHub)

    • URL

      https://github.com/hsogo/gazeparser

    • Related Report
      2023 Research-status Report
  • [Remarks] rsgt project page

    • URL

      https://github.com/hsogo/rsgt

    • Related Report
      2022 Research-status Report

URL: 

Published: 2021-04-28   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi