• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Action recognition support using hand signs to understand proximity space for visually impaired people

Research Project

Project/Area Number 20K03101
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 09070:Educational technology-related
Research InstitutionNihon Pharmaceutical University

Principal Investigator

Murai Yasuyuki  日本薬科大学, 薬学部, 教授 (30373054)

Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2022: ¥520,000 (Direct Cost: ¥400,000、Indirect Cost: ¥120,000)
Fiscal Year 2021: ¥2,860,000 (Direct Cost: ¥2,200,000、Indirect Cost: ¥660,000)
Fiscal Year 2020: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Keywords視覚障害 / AI / 歩行支援 / 視覚障碍者 / 歩行者検出 / 学習済みAI / 視覚障碍 / 深層学習 / 行動認識
Outline of Research at the Start

本研究は、視覚障害者の行動認識支援、特に、近接空間を理解するための携帯端末による支援を提供することを目標にしている。環境などの外的要因の分析だけでなく、不十分な情報や手がかりのない状況下での、視覚障害者が置かれている状況等の内的要因も分析することで、歩行時の偏軌傾向を含む様々な偏行状況を修正する支援手法を構築し、行動認識全般に渡る視覚障害補償支援を目指している。
目の前の状況説明と,正しい状況への改善を援助者なしに視覚障害者のみで行えるような支援技術を開発する。また、視覚障害者への歩行支援や生活支援だけでなく,学習支援も含めた様々な行動認識支援を目標とする。

Outline of Final Research Achievements

In this study, we developed a proximity space understanding support system using a mobile terminal to assist the action recognition of visually impaired people. The system captures the direction of movement with a camera, detects the safe walking area with AI, displays it on display, and announces it with audio. The user adjusts the direction of the camera and the body based on the position of the walking area on display and determines the direction of movement with the help of the height of the sound. This operation has the effect of showing the direction by taking the hand of the visually impaired person. It is expected that this system will enable visually impaired people to walk safely and independently.

Academic Significance and Societal Importance of the Research Achievements

これまで、視覚障害者の歩行支援技術が多く提案されてきたが、主な取り組みは歩行環境画像からの文字認識や横断歩道の識別などの位置特定であり、不十分な情報や手がかりのない状況下での危険回避は困難であった。また、視覚障害者が撮影した画像からの行動認識には、撮影した画像に必要な情報が映っていないなど、行動分析や機械学習に制約があった。
視覚障害者は歩行時に目標に向かいまっすぐに歩けない「偏軌傾向」があり、転落事故の原因であった。このため、視覚に代わって偏軌を修正するために、手を取って示すことが有効な手段とされる。これらの背景から、視覚障害者の歩行支援における近接空間認知支援の開発が求められている。

Report

(4 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (12 results)

All 2023 2022 2021 2020

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (11 results) (of which Int'l Joint Research: 2 results)

  • [Journal Article] Prototype of a Method to Support the Walking of Visually Impaired by Detecting the Walkable Area Using Pedestrians2023

    • Author(s)
      Murai Yasuyuki、Tatsumi Hisayuki、Ota Yumiko、Miyakawa Masahiro
    • Journal Title

      International Journal of Engineering and Technology

      Volume: 15 Issue: 2 Pages: 41-44

    • DOI

      10.7763/ijet.2023.v15.1217

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] 視覚障碍者歩行支援のためのAIを用いた歩行可能領域の検出と誘導方法の試作2022

    • Author(s)
      村井保之、巽久行、太田友三子、徳増眞司、宮川正弘
    • Organizer
      FIT2022 情報科学技術フォーラム
    • Related Report
      2022 Annual Research Report
  • [Presentation] Development of walking support system for the visually impaired people using pre-trained AI model2021

    • Author(s)
      Yasuyuki Murai, Hisayuki Tatsumi, Yumiko Ota, Masahiro Miyakawa
    • Organizer
      2021 13th International Conference on Education Technology and Computers (ICETC 2021)
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] 視覚障碍者歩行支援のためのAIを用いた歩行者と歩行可能領域の検出2021

    • Author(s)
      村井保之、巽久行、太田友三子、宮川正弘
    • Organizer
      情報処理学会第84 回全国大会
    • Related Report
      2021 Research-status Report
  • [Presentation] 触察での形状理解における晴眼者と視覚障碍者との脳活動の差異について2021

    • Author(s)
      巽久行、市川涼介、村田勇樹、堀江則之、村井保之
    • Organizer
      情報処理学会第84 回全国大会
    • Related Report
      2021 Research-status Report
  • [Presentation] 機械学習を用いた誘導マーク認識と人流検出による重度視覚障害者向け駅構内歩行支援システム2021

    • Author(s)
      市川涼介、村田勇樹、村井保之、堀江則之、巽久行
    • Organizer
      情報処理学会第84 回全国大会
    • Related Report
      2021 Research-status Report
  • [Presentation] 学習済AIを用いた視覚障碍者歩行支援アプリの試作2021

    • Author(s)
      村井保之、巽久行、太田友三子、徳増眞司、宮川正弘
    • Organizer
      FIT2021(第20 回情報科学技術フォーラム)
    • Related Report
      2021 Research-status Report
  • [Presentation] レーザ網膜投影で電子白板の情報を視認させる弱視学生のための合理的配慮2021

    • Author(s)
      巽久行、村井保之、森野誠治、鈴木誠
    • Organizer
      FIT2021(第20 回情報科学技術フォーラム)
    • Related Report
      2021 Research-status Report
  • [Presentation] 触力覚を伴う擬似仮想オブジェクトの触察による形状認識での視覚障碍者の脳活動について2021

    • Author(s)
      巽久行、市川涼介、小林真、関田巌、村井保之
    • Organizer
      FIT2021(第20 回情報科学技術フォーラム)
    • Related Report
      2021 Research-status Report
  • [Presentation] Support for Visually Impaired Persons' Understanding of Proximity Space and Action Recognition Based on Pointing2020

    • Author(s)
      Yasuyuki Murai, Hisayuki Tatsumi, Yumiko Ota, Masahiro Miyakawa
    • Organizer
      2020 12th International Conference on Education Technology and Computers (ICETC 2020)
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] ウェアラブルカメラを用いた視覚障碍者の行動認識と支援2020

    • Author(s)
      井保之、巽久行、太田友三子、徳増眞司、宮川正弘
    • Organizer
      FIT2020(第 19 回情報科学技術フォーラム)
    • Related Report
      2020 Research-status Report
  • [Presentation] 音響感覚で形状理解を助ける視覚障碍者のためのオブジェクト触知支援2020

    • Author(s)
      巽久行、村井保之、徳増眞司、関田巌、宮川正弘
    • Organizer
      FIT2020(第 19 回情報科学技術フォーラム)
    • Related Report
      2020 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi