• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

網膜と視覚野の情報処理と通信に学んだ脳刺激型人工視覚の開発

Research Project

Project/Area Number 20H00606
Research Category

Grant-in-Aid for Scientific Research (A)

Allocation TypeSingle-year Grants
Section一般
Review Section Medium-sized Section 61:Human informatics and related fields
Research InstitutionFukui University of Technology (2020-2021, 2023)
Osaka University (2022)

Principal Investigator

八木 哲也  福井工業大学, 工学部, 教授 (50183976)

Co-Investigator(Kenkyū-buntansha) 石井 和男  九州工業大学, 大学院生命体工学研究科, 教授 (10291527)
林田 祐樹  三重大学, 工学研究科, 教授 (10381005)
武内 良典  近畿大学, 理工学部, 教授 (70242245)
廣瀬 哲也  大阪大学, 大学院工学研究科, 教授 (70396315)
高橋 啓介  愛知淑徳大学, 健康医療科学部, 教授 (80236273)
末松 尚史  大阪大学, 工学研究科, 助教 (30779517)
Project Period (FY) 2020-04-01 – 2024-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥44,330,000 (Direct Cost: ¥34,100,000、Indirect Cost: ¥10,230,000)
Fiscal Year 2023: ¥6,370,000 (Direct Cost: ¥4,900,000、Indirect Cost: ¥1,470,000)
Fiscal Year 2022: ¥11,180,000 (Direct Cost: ¥8,600,000、Indirect Cost: ¥2,580,000)
Fiscal Year 2021: ¥14,950,000 (Direct Cost: ¥11,500,000、Indirect Cost: ¥3,450,000)
Fiscal Year 2020: ¥11,830,000 (Direct Cost: ¥9,100,000、Indirect Cost: ¥2,730,000)
Keywords人工視覚 / シリコン網膜 / 画像圧縮 / 画像無線通信 / 光覚シミュレーション / 視覚再建 / 皮質電気刺激 / ニューロモーフィック網膜 / 低消費電力 / 画像情報圧縮 / 画像情報通信 / 網膜 / 視覚情報符号化 / 無線通信 / スパイクニューロン / 脳刺激型人工視覚 / 心理物理実験 / 人工視覚補綴
Outline of Research at the Start

脳刺激型人工視覚(以下人工視覚)は、失明者の視覚野を多点で電気刺激することにより、視覚機能を部分的にも再建するという未来の失明治療法である。本研究において、視覚の初期過程における情報処理、符号化および通信様式を工学的に理解し、申請者が開発したアナログ人工網膜と、視神経における画像符号化・通信の原理を組み合わせた全く新しい前臨床段階の人工視覚を完成させ、心理物理学実験によりその性能を評価する。

Outline of Annual Research Achievements

網膜視神経の応答を模倣したニューロモーフィック網膜(NM網膜)を用いた脳刺激型人工視覚システムを構築するために、本年度は以下のことを実施した。
1.昨年までの研究から、申請者らが開発したNM網膜の出力を用いて視覚野に埋植された電極を駆動することにより、体外モジュールと体内モジュール間の通信コストを大きく抑えることができることが分かった。NM網膜のスパイク画像出力を、実時間で情報圧縮するためのコアプロセッサ内臓集積回路を設計・レイアウトし、実際にチップ化した。またこの試作チップの性能を試験するための評価ボードを作成し、試作集積回路を評価した。当初の計画どおり、64x64画素の情報をリアルタイムで圧縮できることを確認した。
2.人工視覚において視覚情報はNM網膜→体外モジュール→体内モジュールへと伝達される。上記1により試作された情報圧縮評価システムをもちいて、体内と体外モジュールの間の無線通信を試験するための通信ボードを設計・製作した。NM網膜出力を模擬する制御信号をもちいて、通信がリアルタイムで実行されることを確認した。
3.NM網膜と試作したプロセッサ内臓集積回路とのインターフェイスアルゴリズムを開発した。現在このアルゴリズムをシミュレーション評価中である。
4.昨年度に完成した心理物理実験用シミュレータを用いて、実験室空間および実空間においてナビゲーション実験を行い、人工視覚が有効となる最低電極数とその配置条件を精査した。電極数は、最低64x64程度以上が必要であると結論した。この数は現在開発しているシステムの条件に合致する。またこの範囲で最適な光覚パターンを惹起する電極配置について検討を加えた。
5.体内モジュールにより埋植電極を駆動することを想定して、プロセッサ内臓集積回路と現有の埋植電極刺激チップを結ぶアルゴリズムを考案した。

Current Status of Research Progress
Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

NM網膜のスパイク画像出力を実時間で情報圧縮するためのコアプロセッサ内臓集積回路については、ほぼ期待通りの性能を確認することができた。また予想したよりチップのレイアウト面積が小さくレイアウトでき、今後さらにチップを小型化する、ないしメモリ部を増設して処理画素規模を拡大することが可能と判断された。この点は予想以上の結果であった。無線通信試験については、評価ボード試作に手間取ったため通信試験が遅れ、予定を繰り越して実施にこぎつけた。ただし試験の結果、リアルタイムの通信ができることを確認したものの、期待したほどの低消費電力が達成されておらず、通信プロトコルの改良が必要である。この点が予定より遅れている。NM網膜と試作したプロセッサ内臓集積回路とのインターフェイスアルゴリズム開発においてはほぼ順調であり、現在このアルゴリズムをシミュレーションにより評価中である。以上の画像通信アルゴリズム開発を通して、開発手法が画像情報通信一般において新規性、独自性、波及性があると判断し、ロボットビジョンなどへの応用を視野に入れた研究を追加している。この点は当初予想した以上の成果と考えている。人工視覚再建に有効となる最低電極数とその配置条件の精査から電極数は、有効な光覚パターンを惹起する電極配置について他の国内外研究グループより詳細な検討を加えている。以上、通信機能については期待した性能を達成していない点で当初計画より遅れているが、他方で情報通信一般への応用が見えたという点において、当初において予想、期待していた以上の波及性を見出すことができた。これらの状況から総合的にはやや遅れていると自己評価した。

Strategy for Future Research Activity

体内モジュールと体外モジュールの無線通信部分は、現状では期待したほどの低消費電力化が達されていない。しかしながらこの部分は本研究提案の独創・独自性および国内外のグループのデザインに対する優位性に関わる重要課題であるので、重点的に取り組み、是非とも達成を目指す。解決手段として、圧縮信号を通信している時間帯以外はモジュールをスリープさせることによって、目標とする10mW以下での動作が可能であると考えている。人工視覚によって再建される視覚は、健常者の視覚とは大きく異なるものであり、人工視覚治療の可能性とともにその限界を示すことは臨床応用にとって重要である。そこで光覚パターンのシミュレーションについては、理論的な視野-脳表地図からのずれを考慮したより現実に近い光覚パターンを再現して、人工視覚によってどの程度の視覚再建が可能かを推定・評価する。以上を中心課題として、全体のシステムを統合し、本研究で提案する人工視覚デザインの有効性を示す。また課題遂行の中で、ニューロモーフィック網膜による画像圧縮符号化-通信-画像情報展開が、ロボットビジョンやネットワーク画像通信・理解にも有効であることが見えてきた。この方向への展開は、独創的であり波及性からみてインパクトが高いと考えている。本研究で開発しているアルゴリズム/アーキテクチャを特殊環境(例えば水中)での画像処理・通信に応用する可能性についても並行して策定していく。

Report

(4 results)
  • 2022 Annual Research Report
  • 2021 Annual Research Report
  • 2020 Comments on the Screening Results   Annual Research Report
  • Research Products

    (23 results)

All 2024 2023 2022 2021

All Journal Article (13 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 11 results,  Open Access: 3 results) Presentation (10 results) (of which Int'l Joint Research: 2 results,  Invited: 2 results)

  • [Journal Article] On the spatial synaptic propagation of excitations induced by repetitive microstimulation pulses in the mouse visual cortex2024

    • Author(s)
      Santa Fukuda, Tomohiro Nomoto, Tetsuya Yagi, Yuki Hayashida
    • Journal Title

      Proceedings of 6th Annual International Conference of the IEEE Engineering in Medicine and Biology Society

      Volume: -

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Sub-50 mV power supply, recursive stacking body bias NAND gate for extremely low-voltage CMOS LSIs2024

    • Author(s)
      Sumi Shintaro、Sebe Hikaru、Kanemoto Daisuke、Hirose Tetsuya
    • Journal Title

      Japanese Journal of Applied Physics

      Volume: 63 Issue: 3 Pages: 03SP87-03SP87

    • DOI

      10.35848/1347-4065/ad29ea

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Ultra-low power low-dropout linear regulator with a load current tracking bias current generator for loT devices2024

    • Author(s)
      Y. Mizuno, H. Sebe, D. Kanemoto, T. Hirose
    • Journal Title

      Japanese Journall of Appled Physics

      Volume: 63 Issue: 2 Pages: 02SP96-02SP96

    • DOI

      10.35848/1347-4065/ad202e

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] CODEC system using EG2C chips and power control with a sleep mode for a visual prosthesis2024

    • Author(s)
      Naoya Tanaka, Shogo Hirayama and Yoshinori Takeuchi
    • Journal Title

      Proceedings of The 25th Workshop on Synthesis And System Integration of Mixed Information Technologies

      Volume: - Pages: 335-340

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Effects of the inter-phase delay of microstimulation pulses on the spatio-temporal neural excitation in the mouse visual cortex in vitro2023

    • Author(s)
      Santa Fukuda, Tomohiro Nomoto, Tetsuya Yagi, Yuki Hayashida
    • Journal Title

      Proceedings of 11th International IEEE EMBS Conference on Neural Engineering

      Volume: article#81422

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Sub-30-mV-Supply, Fully Integrated Ring Oscillator Consisting of Recursive Stacking Body-Bias Inverters for Extremely Low-Voltage Energy Harvesting2023

    • Author(s)
      H. Sebe, T. Okumura, S. Sumi, D. Kanemoto P. -H. Chen, T. Hirose
    • Journal Title

      Proceedings of ESSCIRC 2023- IEEE 49th European Solid State Circuits Conference (ESSCIRC)

      Volume: - Pages: 325-328

    • DOI

      10.1109/esscirc59616.2023.10268819

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] オペコードコンパクト化によるプロセッサの回路面積低減の評価2023

    • Author(s)
      吉澤翔悟、武内良典
    • Journal Title

      DAシンポジウム2023論文集

      Volume: 123 Pages: 71-77

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 視覚野刺激型人工視覚システムの刺激データに対する圧縮プロセッサ設計2023

    • Author(s)
      平山聖冴,田中尚哉,武内良典
    • Journal Title

      情処研報

      Volume: SLDM-201, No.7 Pages: 90-96

    • Related Report
      2021 Annual Research Report
  • [Journal Article] 人工視覚システムのデータ圧縮伸長モジュールのFPGA実装2023

    • Author(s)
      田中尚哉,平山聖冴,武内良典
    • Journal Title

      情処研報

      Volume: SLDM-201, No.8, Pages: 97-102

    • Related Report
      2021 Annual Research Report
  • [Journal Article] Multichannel stimulation module as a tool for animal studies on cortical neural prostheses2022

    • Author(s)
      Hayashida Yuki、Kameda Seiji、Umehira Yuichi、Ishikawa Shinnosuke、Yagi Tetsuya
    • Journal Title

      Frontiers in Medical Technology

      Volume: 4

    • DOI

      10.3389/fmedt.2022.927581

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] A bench-test system of the visual prostheses utilizing retino-morphic spikes as the driver signals of intracortical microstimulation2022

    • Author(s)
      Ryosuke Okada, Shinnosuke Ishikawa, Tetsufumi Tasaki, Tetsuya Yagi, Yuki Hayashida
    • Journal Title

      Proceedings of the 2022 International Conference on Artificial Life and Robotics

      Volume: - Pages: 524-528

    • Related Report
      2020 Annual Research Report
    • Peer Reviewed
  • [Journal Article] A 35-mV supply ring oscillator consisting of stacked body bias inverters for extremely low-voltage LSIs2021

    • Author(s)
      Nishi Masaya、Matsumoto Kaori、Kuroki Nobutaka、Numa Masahiro、Sebe Hikaru、Matsuzuka Ryo、Maida Osamu、Kanemoto Daisuke、Hirose Tetsuya
    • Journal Title

      IEICE Electronics Express

      Volume: 18 Issue: 6 Pages: 20210065-20210065

    • DOI

      10.1587/elex.18.20210065

    • NAID

      130008003169

    • ISSN
      1349-2543
    • Year and Date
      2021-03-25
    • Related Report
      2020 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Accumulation of non-synaptic and synaptic excitations induced by microstimulation pulses in the mouse visual cortex layer II/II2021

    • Author(s)
      Santa Fukuda, Tomohiro Nomoto, Kou Yoshida, Yuki Hayashida, Tetsuya Yagi
    • Journal Title

      Proceedings of the 2021 43rd Annual International Conference of the IEEE Engineering in Medicine & Biology Society

      Volume: - Pages: 5164-5164

    • Related Report
      2020 Annual Research Report
    • Peer Reviewed
  • [Presentation] Neuromorphic design of cortical visual prosthesis2024

    • Author(s)
      Tetsuya Yagi
    • Organizer
      The 12th Research Institute of Electrical Communication (RIEC) International Symposium on Brain Functions and Brain Computer
    • Related Report
      2022 Annual Research Report
  • [Presentation] 人工視覚システムのための圧縮伸張チップEG2Cの消費電力評価2023

    • Author(s)
      平山聖冴
    • Organizer
      電気電子情報通信学会 VLD研究会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 視覚神経系を模倣した脳刺激型人工視覚の開発2023

    • Author(s)
      八木哲也
    • Organizer
      第62回日本生体医工学会大会企画シンポジウム
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] Use-Dependent Inactivation of the Mouse Visual Cortex in Response to Microstimulation Train2022

    • Author(s)
      Santa Fukuda, Kou Yoshida, Tomohiro Nomoto, Tetsuya Yagi, Yuki Hayashida
    • Organizer
      E-Health and Bioengineering Conference (EHB)
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Fully Integrated Switched-Capacitor Buck Converter with Variable Ratio and Frequency Controllers for Ultra-Low Power LSI Systems2022

    • Author(s)
      R. Matsuzuka, S. Kanzaki, K. Matsumoto, N. Kuroki, M. Numa, D. Kanemoto, T. Hirose
    • Organizer
      International Conference on Solid State Devices and Materials (SSDM 2022)
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 大脳皮質への連続パルス微小刺激に対する蓄積的興奮応答のメカニズムに関する解析2021

    • Author(s)
      福田燦太, 野本知宏, 吉田 航, 林田祐樹, 八木哲也
    • Organizer
      2021年度 ME とバイオサネティックス研究会
    • Related Report
      2020 Annual Research Report
  • [Presentation] RISC-Vを用いた命令拡張のためのプロセッサ開発環境の検討2021

    • Author(s)
      中尾怜史, 武内良典
    • Organizer
      DAシンポジウム2021
    • Related Report
      2020 Annual Research Report
  • [Presentation] Rocket-Chipへの三角関数演算命令の実装と評価2021

    • Author(s)
      中尾怜史, 武内良典
    • Organizer
      デザインガイア
    • Related Report
      2020 Annual Research Report
  • [Presentation] 人工視覚装用者への視能訓練の有効性:人工視覚シミュレーターを用いた知覚再現実験2021

    • Author(s)
      本居快・杉浦巧知・國武実里・高橋啓介・髙橋伸子・松久保雄哉・八木哲也
    • Organizer
      第61回視能矯正学会
    • Related Report
      2020 Annual Research Report
  • [Presentation] 人工視覚:脳視覚系に学んだコンピュータの目2021

    • Author(s)
      八木哲也
    • Organizer
      電気学会北陸支部フロンティアセミナー
    • Related Report
      2020 Annual Research Report
    • Invited

URL: 

Published: 2020-04-28   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi