• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Support for communication using eye-gaze gestures

Research Project

Project/Area Number 20K12746
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 90150:Medical assistive technology-related
Research InstitutionOsaka Electro-Communication University

Principal Investigator

HIKITA Shinichi  大阪電気通信大学, 工学部, 准教授 (00347618)

Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2022: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2021: ¥1,690,000 (Direct Cost: ¥1,300,000、Indirect Cost: ¥390,000)
Fiscal Year 2020: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywords眼球運動 / カメラ / インタフェース / ハンズフリー / 視線
Outline of Research at the Start

病気や怪我で手足が不自由になった運動弱者にとって,介助なしで健常者のように自立した日常生活を営むことは難しい.そこで,本研究では,運動弱者の能動的な活動を支援するため,左右両眼の眼球側面画像を用いて3次元の視線ジェスチャ(左右・上下・前後方向の目の動きのパターン)を識別し,介護ロボットやPCのような情報機器に対して目で合図を送ることにより多様な意思伝達を可能にするインタフェースを開発する.

Outline of Final Research Achievements

In this study, we developed an eyeglass-type interface that enables communication by eye to information devices such as nursing-care robots and PCs by identifying eye gestures using lateral images of the left and right eyes. First, we developed a prototype pair of eyeglasses with cameras fixed to the left and right temples of the eyeglass frames. Next, we developed a method to detect the position of the black eye (iris) from the lateral image of the eye. Next, from the viewpoint of convenience, we proposed a method of eye gaze input that combines three basic gestures and two auxiliary gestures to realize multiple inputs with the simplest possible eye gaze gestures. Finally, we conducted experiments to identify eye gaze gestures and confirmed the effectiveness of the proposed method.

Academic Significance and Societal Importance of the Research Achievements

本研究では,2台の眼球撮影用カメラと市販のメガネフレームを用いて目による合図で意思伝達を可能にするメガネ型インタフェースを提案し,その基盤となる技術を開発した.病気や怪我で手足が不自由になった運動弱者(ユーザ)にとって,介助なしで健常者のように自立した日常生活を営むことは困難である.提案インタフェースによって,ユーザが最小限の介助で携帯情報端末やPCを利用したり,介護ロボットに自分の意思を伝達できるようになれば,介助者およびユーザ両者の大幅な生活の質(Quality of Life)の向上,さらにはユーザの社会復帰促進につながると期待される.

Report

(4 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (3 results)

All 2023 2022 2021

All Presentation (3 results)

  • [Presentation] 眼球側面画像を用いた機械学習に基づく虹彩検出2023

    • Author(s)
      鷲頭佳樹 今林潤 疋田真一
    • Organizer
      第18回空間認知と運動制御研究会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 眼球側面画像における目領域に基づく虹彩移動量の検出2022

    • Author(s)
      疋田真一,駒木根直人,髙栁優貴
    • Organizer
      第188回ヒューマンインタフェース学会研究会
    • Related Report
      2021 Research-status Report
  • [Presentation] 左右両眼の側面画像を用いた視線ジェスチャの識別2021

    • Author(s)
      疋田真一,木下久徳,槻瀬彩名
    • Organizer
      第181回ヒューマンインタフェース学会研究会
    • Related Report
      2020 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi