• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2020 Fiscal Year Annual Research Report

System for long-term measurement of rotational eye movement and gaze in the dark environment

Research Project

Project/Area Number 17K01071
Research InstitutionUniversity of Tsukuba

Principal Investigator

星野 聖  筑波大学, システム情報系, 教授 (80251528)

Project Period (FY) 2017-04-01 – 2021-03-31
Keywords眼球回旋運動計測 / 視線推定 / 眼球白目の血管像 / キャリブレーション用凝視点 / 眼の概ね横に設置した眼球撮影用カメラ
Outline of Annual Research Achievements

本研究の目的は,小型軽量で,頭部への強固な装置の固定や,背景光遮光のためのゴーグルが不要な,高精度の眼球運動計測装置を開発することである.実現方法は,とくに眼球回旋運動計測に関しては,装置装用者の眼球白目部分の血管像を追跡する.これにより,耳鼻咽喉科めまい外来患者にとって負荷の少ない眼振検査や,患者の日常生活での長時間眼振モニタリングを可能にしたり,自動車運転者や立体映像観視者の体調や心理状態を,常時,無意識にモニタリングできるようにする.さらには,視線推定を通して,関心の対象や程度を定量化できるようにする.令和2年度においては,とくに視線推定について前述目標達成を目指した.
本研究課題が目指した視線推定は,眼球白目の血管像を撮像する眼球回旋運動計測と同じく,小型の眼球撮像用カメラを,ユーザの眼の概ね側方に設置しても高精度推定ができるようにしたい.しかし,眼の側方や下方から眼球撮像すると,眼球が3次元の球体であるため,撮像される2次元の瞳孔中心座標分布が大きく歪む.歪んだ2次元の(x,y)座標から,視線(θx,θy)を推定するため,ユーザに事前に提示するキャリブレーション用凝視点を工夫することで,(x,y)から(θx,θy)への写像を正確に行えるようにした.
予備実験や理論的検討の結果,眼球から60度横(すなわち目尻側)に眼球撮像用カメラを装着したメガネ型装置を装用した不特定ユーザに対して,目尻側に倒した五角形様に分布するキャリブレーション用凝視点を注視させ,それら5点の瞳孔中心座標と,他に1点の重心の座標の,合計6点で共二次方程式を解けば,高精度視線推定が可能であることを見出した.
同研究成果は,たとえばヘッドマウントディスプレイ内や剣道の面防具内のように,眼球撮像用小型カメラの設置位置が制約を受ける場合でも,高精度な眼球回旋運動計測と視線推定とが可能であることを示している.

  • Research Products

    (11 results)

All 2021 2020 Other

All Journal Article (4 results) (of which Peer Reviewed: 4 results,  Open Access: 3 results) Presentation (3 results) (of which Int'l Joint Research: 3 results,  Invited: 3 results) Book (2 results) Remarks (1 results) Patent(Industrial Property Rights) (1 results) (of which Overseas: 1 results)

  • [Journal Article] Calibration fixation points that enable accurate gaze estimation with pupil image capturing camera installed almost next to eye2021

    • Author(s)
      Hoshino Kiyoshi、Kawamoto Keisuke、Nakai Yuya
    • Journal Title

      Proc. Intl. Conf. on Image, Video and Signal Processing

      Volume: 3 Pages: 1-8

    • DOI

      10.1145/3459212.3459219

    • Peer Reviewed / Open Access
  • [Journal Article] Voluntary fNIRS Waveform Change to Hot Taste Stimulus by Repeated Experience of Licking a Source of Strong Hot Taste2020

    • Author(s)
      Nakai Yuya、Nie Shangshang、Fukida Yuto、Tomida Motomasa、Kotani Hajime、Hoshino Kiyoshi
    • Journal Title

      Proc. Intl. Conf. on Digital Medicine and Image Processing

      Volume: 3 Pages: 7-12

    • DOI

      10.1145/3441369.3441371

    • Peer Reviewed / Open Access
  • [Journal Article] Introducing Swordsman Robot Defensing2020

    • Author(s)
      Ozone Yoshimasa、Zhao Chenyang、Hoshino Kiyoshi
    • Journal Title

      Proc. Intl. Conf. on Digital Medicine and Image Processing

      Volume: 3 Pages: 33-39

    • DOI

      10.1145/3441369.3441375

    • Peer Reviewed / Open Access
  • [Journal Article] Eye Tracking and Measurement of Eye Rotation Using a Small Camera Installed roughly next to the Eye2020

    • Author(s)
      Hoshino Kiyoshi、Noguchi Yuki、Ono Nayuta
    • Journal Title

      Proc. 2020 13th International Conference on Human System Interaction

      Volume: 13 Pages: 1-6

    • Peer Reviewed
  • [Presentation] Gaze Estimation and Eye Rotation Measurement by a Small Camera Installed almost next to the Eyeball2021

    • Author(s)
      Hoshino Kiyoshi
    • Organizer
      International Conference on Image, Video and Signal Processing
    • Int'l Joint Research / Invited
  • [Presentation] Eye Tracking and Eye Rotation Measurement by a Small Camera Installed almost at the Side of the Eyeball2020

    • Author(s)
      Hoshino Kiyoshi
    • Organizer
      International Conference on Biomedical and Bioinformatics Engineering
    • Int'l Joint Research / Invited
  • [Presentation] Eye Tracking and Measurement of Eye Rotation by a Small Camera Installed almost by the Side of the Eye2020

    • Author(s)
      Hoshino Kiyoshi
    • Organizer
      International Conference on Computing and Artificial Intelligence
    • Int'l Joint Research / Invited
  • [Book] “眼のほぼ横に設置した小型カメラによる視線推定と眼球回旋運動計測” 生体情報センシングと人の状態推定への応用2020

    • Author(s)
      星野 聖
    • Total Pages
      11
    • Publisher
      技術情報協会
    • ISBN
      978-4-86104-800-5
  • [Book] “短剣道の動作計測と技予測” 生体情報センシングと人の状態推定への応用2020

    • Author(s)
      星野 聖
    • Total Pages
      7
    • Publisher
      技術情報協会
    • ISBN
      978-4-86104-800-5
  • [Remarks] 眼のほぼ横に設置した小型カメラによる視線推定と眼球回旋運動計測

    • URL

      https://youtu.be/tq_cP0yRxQI

  • [Patent(Industrial Property Rights)] 動き学習装置、制御装置及びプログラム2020

    • Inventor(s)
      星野聖、野口勇気
    • Industrial Property Rights Holder
      筑波大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      PCT/JP2020/035013
    • Overseas

URL: 

Published: 2021-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi