• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Object Recognition Aid for the Visually Impaired Based on On-demand Image Processing

Research Project

Project/Area Number 25560278
Research Category

Grant-in-Aid for Challenging Exploratory Research

Allocation TypeMulti-year Fund
Research Field Rehabilitation science/Welfare engineering
Research InstitutionUniversity of Tsukuba

Principal Investigator

Takizawa Hotaka  筑波大学, システム情報系, 准教授 (40303705)

Co-Investigator(Kenkyū-buntansha) MIZUNO Shinji  愛知工業大学, 情報科学部, 教授 (20314099)
EZAKI Nobuo  鳥羽商船高等専門学校, 制御情報工学科, 教授 (30311038)
AOYAGI Mayumi  愛知教育大学, 教育学部, 准教授 (40550562)
Project Period (FY) 2013-04-01 – 2016-03-31
Project Status Completed (Fiscal Year 2015)
Budget Amount *help
¥3,640,000 (Direct Cost: ¥2,800,000、Indirect Cost: ¥840,000)
Fiscal Year 2015: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2014: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
Fiscal Year 2013: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
Keywords視覚障がい者 / 支援システム / 測距センサー / 画像処理 / ユーザインターフェース / 福祉工学 / Microsoft Kinect / 物体認識 / 音声認識エンジン / ユーザ実験
Outline of Final Research Achievements

In this research project, we proposed an assistive system to help visually impaired individuals (users) not only detect obstacles in their vicinity, but also recognize what these objects are. The following three items were conducted: (1) we built recognition methods of several objects, such as chairs, desks, stairs, elevators, and handrails, by use of RGB-D sensors, such as Microsoft Kinect. (2) We also developed user interface systems based on vibrators, loudspeakers, microphones, and voice recognition technique. The user interface system allowed users to instruct the system and to understand the output of the system easily. (3) We conducted user studies to evaluate our assistive system. We compare our system with a conventional white cane, and confirmed that our system was more effective to find target objects.

Report

(4 results)
  • 2015 Annual Research Report   Final Research Report ( PDF )
  • 2014 Research-status Report
  • 2013 Research-status Report
  • Research Products

    (30 results)

All 2016 2015 2014 2013

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Acknowledgement Compliant: 1 results) Presentation (29 results) (of which Int'l Joint Research: 3 results)

  • [Journal Article] Kinect cane: an assistive system for the visually impaired based on the concept of object recognition aid2015

    • Author(s)
      Hotaka Takizawa, Shotaro Yamaguchi, Mayumi Aoyagi, Nobuo Ezaki and Shinji Mizuno
    • Journal Title

      Personal and Ubiquitous Computing

      Volume: 0 Issue: 5-6 Pages: 1-11

    • DOI

      10.1007/s00779-015-0841-4

    • Related Report
      2014 Research-status Report
    • Peer Reviewed / Acknowledgement Compliant
  • [Presentation] Kinect白杖による上り/下り階段の認識手法の改良2016

    • Author(s)
      倉持裕介,滝沢穂高(筑波大),青柳まゆみ(愛知教大),江崎修央(鳥羽商船高専),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告 WIT2015-88 - WIT2015-111
    • Place of Presentation
      筑波技術大学 春日キャンパス 講堂(茨城県つくば市)
    • Year and Date
      2016-03-06
    • Related Report
      2015 Annual Research Report
  • [Presentation] A Preliminary Study on Self ADL Training for the Visually Impaired Based on a Parametric-speaker Robot2015

    • Author(s)
      Hotaka Takizawa, Koji Kainou, Mayumi Aoyagi, Nobuo Ezaki, Shinji Mizuno
    • Organizer
      Proceedings of the 6th International Conference on Advanced Mechatronics (ICAM2015)
    • Place of Presentation
      Nishiwaseda Campus of Waseda University, Tokyo
    • Year and Date
      2015-12-07
    • Related Report
      2015 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Kinect白杖システムによる顔検出を利用した空席認識に関する基礎的検討2015

    • Author(s)
      倉持 裕介, 滝沢 穂高, 青柳 まゆみ, 江崎 修央, 水野 慎士
    • Organizer
      第41回感覚代行シンポジウム
    • Place of Presentation
      産総研臨海副都心センター別館11階多目的室,東京都
    • Year and Date
      2015-12-07
    • Related Report
      2015 Annual Research Report
  • [Presentation] 視覚障がい者のための点消灯の画像認識システムとGoogle Playへの公開2015

    • Author(s)
      中村 大樹, 滝沢 穂高, 青柳 まゆみ, 江崎 修央, 水野 慎士
    • Organizer
      第41回感覚代行シンポジウム
    • Place of Presentation
      産総研臨海副都心センター別館11階多目的室,東京都
    • Year and Date
      2015-12-07
    • Related Report
      2015 Annual Research Report
  • [Presentation] 視覚障がい者のための室内照明とエレベータボタンの点消灯の画像認識に関する基礎的検討2015

    • Author(s)
      中村大樹,滝沢穂高(筑波大),青柳まゆみ(愛知教育大),江崎修央(鳥羽商船高専),水野慎士(愛知工大)
    • Organizer
      映像情報メディア学会2015年年次大会予稿集, 映像情報メディア学会
    • Place of Presentation
      東京理科大学・葛飾キャンパス,東京都
    • Year and Date
      2015-08-26
    • Related Report
      2015 Annual Research Report
  • [Presentation] A Preliminary Study on Network-based ADL Training for the Visually Impaired by Use of a Parametric-speaker Robot2015

    • Author(s)
      Koji Kainou, Hotaka Takizawa, Mayumi Aoyagi, Nobuo Ezaki, Shinji Mizuno
    • Organizer
      Proceeding of the 8th International Symposium on Visual Information Communication and Interaction, the Association for Computing Machinery
    • Place of Presentation
      Hitotsubashi Hall, 東京都千代田区
    • Year and Date
      2015-08-24
    • Related Report
      2015 Annual Research Report
    • Int'l Joint Research
  • [Presentation] A Spot Navigation System for the Visually Impaired by Use of SIFT-Based Image Matching2015

    • Author(s)
      Hotaka Takizawa, Kazunori Orita, Mayumi Aoyagi, Nobuo Ezaki, Shinji Mizuno
    • Organizer
      Proceedings of the 17th International Conference on Human-Computer Interaction 2015, Springer International Publishing Switzerland
    • Place of Presentation
      The Westin Bonaventure Hotel in Los Angeles, California, USA
    • Year and Date
      2015-08-07
    • Related Report
      2015 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 視覚障がい者のためのオプティカルフローを用いたエスカレータの昇降方向の認識に関する基礎的検討2015

    • Author(s)
      中村大樹,滝沢穂高(筑波大),青柳まゆみ(愛知教大),江崎修央(鳥羽高専),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告(PRMU2014-159_200)
    • Place of Presentation
      慶應義塾大学理工学部矢上キャンパス(神奈川県)
    • Year and Date
      2015-03-19
    • Related Report
      2014 Research-status Report
  • [Presentation] パラメトリックスピーカロボットによる視覚障がい者の単独ADL訓練に関する基礎的検討2015

    • Author(s)
      戒能孝治,滝沢穂高(筑波大),青柳まゆみ(愛知教大),江崎修央(鳥羽商船高専),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告(WIT2014-85-121)
    • Place of Presentation
      筑波技術大学(茨城県)
    • Year and Date
      2015-03-13 – 2015-03-14
    • Related Report
      2014 Research-status Report
  • [Presentation] 視覚障がい者のためのスポットナビゲーションシステムの性能評価2015

    • Author(s)
      織田和典,滝沢穂高(筑波大),青柳まゆみ(愛知教大),江崎修央(鳥羽高専),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告(WIT2014-85-121)
    • Place of Presentation
      筑波技術大学(茨城県)
    • Year and Date
      2015-03-13 – 2015-03-14
    • Related Report
      2014 Research-status Report
  • [Presentation] Kinect白杖システムによる椅子認識手法の改良2015

    • Author(s)
      倉持裕介,滝沢穂高(筑波大),青柳まゆみ(愛知教大),江崎修央(鳥羽高専),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告(WIT2014-85-121)
    • Place of Presentation
      筑波技術大学(茨城県)
    • Year and Date
      2015-03-13 – 2015-03-14
    • Related Report
      2014 Research-status Report
  • [Presentation] ステレオカメラ白杖システムによる障害物検出と椅子と机の認識に関する基礎的検討2015

    • Author(s)
      北川 晃,滝沢穂高(筑波大),青柳まゆみ(愛知教大),江崎修央(鳥羽高専),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告(WIT2014-85-121)
    • Place of Presentation
      筑波技術大学(茨城県)
    • Year and Date
      2015-03-13 – 2015-03-14
    • Related Report
      2014 Research-status Report
  • [Presentation] SIFTに基づく画像照合を用いた視覚障がい者の記憶想起支援に関する基礎的検討2015

    • Author(s)
      織田和典,滝沢穂高(筑波大),青柳まゆみ(愛知教大),江崎修央(鳥羽高専),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告(PRMU2014-87-111)
    • Place of Presentation
      奈良先端科学技術大学院大学(奈良県)
    • Year and Date
      2015-01-22 – 2015-01-23
    • Related Report
      2014 Research-status Report
  • [Presentation] Recognition of Elevators with the Kinect Cane System for the Visually Impaired2014

    • Author(s)
      Kuramochi, Yusuke (Univ. of Tsukuba), Takizawa, Hotaka (Univ. of Tsukuba), Aoyagi, Mayumi (Univ. of Tsukuba), Ezaki, Nobuo (Toba National Coll. of Maritime Tech), Mizuno, Shinji (Aichi Inst. of Tech)
    • Organizer
      Proceeding of 2014 IEEE/SICE International Symposium on System Integration
    • Place of Presentation
      中央大学(東京都)
    • Year and Date
      2014-12-13
    • Related Report
      2014 Research-status Report
  • [Presentation] 超指向性スピーカを搭載したロボットによる視覚障がい者への音声案内に関する基礎的検討2014

    • Author(s)
      戒能孝治,滝沢穂高(筑波大),青柳まゆみ(愛知教大),江崎修央(鳥羽商船高等),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告(WIT2014-53-71)
    • Place of Presentation
      産総研臨海副都心センター別館バイオ・IT融合研究棟(東京都)
    • Year and Date
      2014-12-11
    • Related Report
      2014 Research-status Report
  • [Presentation] 視覚障がい者のためのスポットナビゲーションによる記憶想起支援システムの基礎的検討2014

    • Author(s)
      織田和典(筑波大学大学院),滝沢穂高(筑波大学大学院),青柳まゆみ(愛知教育大),江崎修央(国立鳥羽商船高等専門学校),水野慎士(愛知工業大)
    • Organizer
      第40回感覚代行シンポジウム予稿集
    • Place of Presentation
      産総研臨海副都心センター別館バイオ・IT融合研究棟(東京都)
    • Year and Date
      2014-12-08 – 2014-12-09
    • Related Report
      2014 Research-status Report
  • [Presentation] 音声認識エンジンと超指向性スピーカを用いたKinect白杖システムの基礎的検討2014

    • Author(s)
      倉持裕介(筑波大学大学院),滝沢穂高(筑波大学大学院),青柳まゆみ(愛知教育大),江崎修央(国立鳥羽商船高等専門学校),水野慎士(愛知工業大)
    • Organizer
      第40回感覚代行シンポジウム予稿集
    • Place of Presentation
      産総研臨海副都心センター別館バイオ・IT融合研究棟(東京都)
    • Year and Date
      2014-12-08 – 2014-12-09
    • Related Report
      2014 Research-status Report
  • [Presentation] Kinect 白杖システムのためのユーザインターフェースの開発2014

    • Author(s)
      倉持裕介,滝沢穂高(筑波大),青柳まゆみ(愛知教育大),江崎修央(鳥羽商船高専),水野慎士(愛知工大)
    • Organizer
      電子情報通信学会技術研究報告(福祉情報工学 WIT2014 36-52)
    • Place of Presentation
      ユーベルホテル(熊本県)
    • Year and Date
      2014-10-19 – 2014-10-20
    • Related Report
      2014 Research-status Report
  • [Presentation] 視覚障がい者支援のための照明条件の変化を考慮したスポットナビゲーションの基礎的検討2014

    • Author(s)
      織田和典,滝沢穂高(筑波大),青柳まゆみ(愛知教育大),江崎修央(鳥羽商船高専),水野慎士(愛知工大)
    • Organizer
      第13回情報科学技術フォーラム(FIT2014)
    • Place of Presentation
      筑波大学(茨城県)
    • Year and Date
      2014-09-03 – 2014-09-05
    • Related Report
      2014 Research-status Report
  • [Presentation] 超指向性スピーカを用いたロボットによる視覚障がい者のための遠隔作業訓練に関する基礎的検討と評価実験2014

    • Author(s)
      戒能孝治,滝沢穂高(筑波大),青柳まゆみ(愛知教育大),江崎修央(鳥羽商船高専),水野慎士(愛知工大)
    • Organizer
      第13回情報科学技術フォーラム(FIT2014)
    • Place of Presentation
      筑波大学(茨城県)
    • Year and Date
      2014-09-03 – 2014-09-05
    • Related Report
      2014 Research-status Report
  • [Presentation] Kinect白杖システムによる机の認識と性能評価2014

    • Author(s)
      倉持裕介,滝沢穂高(筑波大),青柳まゆみ(愛知教育大),江崎修央(鳥羽商船高専),水野慎士(愛知工大)
    • Organizer
      第13回情報科学技術フォーラム(FIT2014)
    • Place of Presentation
      筑波大学(茨城県)
    • Year and Date
      2014-09-03 – 2014-09-05
    • Related Report
      2014 Research-status Report
  • [Presentation] 超指向性スピーカを搭載したロボットによる視覚障がい者のADL訓練に関する基礎的検討2014

    • Author(s)
      戒能 孝治,滝沢 穂高,青柳 まゆみ,江崎 修央,水野 慎士
    • Organizer
      Media Computing Conference 2014,2014年度 画像電子学会第42回年次大会 予稿集
    • Place of Presentation
      早稲田大学 国際会議場(東京都)
    • Year and Date
      2014-06-29 – 2014-06-30
    • Related Report
      2014 Research-status Report
  • [Presentation] Kinect白杖システムによるエレベータと手すりの認識2014

    • Author(s)
      倉持 裕介,滝沢 穂高,青柳 まゆみ,江崎 修央,水野 慎士
    • Organizer
      Media Computing Conference 2014,2014年度 画像電子学会第42回年次大会 予稿集
    • Place of Presentation
      早稲田大学 国際会議場(東京都)
    • Year and Date
      2014-06-29 – 2014-06-30
    • Related Report
      2014 Research-status Report
  • [Presentation] Using Microsoft Kinect to Develop a Cane-type Assistive System2014

    • Author(s)
      Hotaka Takizawa
    • Organizer
      29th International Technology and Persons with Disabilities Conference
    • Place of Presentation
      SanDiego, USA
    • Related Report
      2013 Research-status Report
  • [Presentation] 視覚障がい者のための画像照合を用いたスポットナビゲーションに関する基礎的検討2014

    • Author(s)
      織田和典,滝沢穂高,青柳まゆみ,江崎修央,水野慎士
    • Organizer
      電子情報通信学会技術研究報告 福祉情報工学 WIT2013-67_92
    • Place of Presentation
      茨城
    • Related Report
      2013 Research-status Report
  • [Presentation] Kinect Cane : Object Recognition Aids for the Visually Impaired2013

    • Author(s)
      Hotaka Takizawa, Shotaro Yamaguchi, Mayumi Aoyagi, Nobuo Ezaki, Shinji Mizuno
    • Organizer
      IEEE 6th International Conference on Human System Interaction (HSI2013)
    • Place of Presentation
      Poland, Sopot
    • Related Report
      2013 Research-status Report
  • [Presentation] Obstacle Detection by the Kinect Cane System for the Visually Impaired2013

    • Author(s)
      Kazunori Orita, Hotaka Takizawa, Mayumi Aoyagi, Nobuo Ezaki and Mizuno Shinji
    • Organizer
      2013 IEEE/SICE International Symposium on System Integration
    • Place of Presentation
      Kobe
    • Related Report
      2013 Research-status Report
  • [Presentation] 視覚障がい者支援のためのKinectを用いた障害物検出の基礎的検討2013

    • Author(s)
      織田和典, 滝沢穂高, 青柳まゆみ (筑波大), 江崎修央 (鳥羽商船), 水野慎士 (愛知工大)
    • Organizer
      第16回画像の認識・理解シンポジウムMIRU2013
    • Place of Presentation
      東京
    • Related Report
      2013 Research-status Report
  • [Presentation] 視覚障がい者のためのSIFT特徴量を用いた画像照合による環境への仮想注釈の付与に関する基礎的研究2013

    • Author(s)
      織田和典,滝沢穂高,青栁まゆみ,江崎修央,水野慎士
    • Organizer
      第39回(2013年)感覚代行シンポジウム講演論文集
    • Place of Presentation
      東京
    • Related Report
      2013 Research-status Report

URL: 

Published: 2014-07-25   Modified: 2019-07-29  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi