• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Constructive approach to investigate the emergent mechanisms of visual and sensory function

Research Project

Project/Area Number 19H04200
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeSingle-year Grants
Section一般
Review Section Basic Section 61060:Kansei informatics-related
Research InstitutionNational Institute of Advanced Industrial Science and Technology

Principal Investigator

Hayashi Ryusuke  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (80444470)

Project Period (FY) 2019-04-01 – 2022-03-31
Project Status Completed (Fiscal Year 2021)
Budget Amount *help
¥15,600,000 (Direct Cost: ¥12,000,000、Indirect Cost: ¥3,600,000)
Fiscal Year 2021: ¥5,330,000 (Direct Cost: ¥4,100,000、Indirect Cost: ¥1,230,000)
Fiscal Year 2020: ¥5,460,000 (Direct Cost: ¥4,200,000、Indirect Cost: ¥1,260,000)
Fiscal Year 2019: ¥4,810,000 (Direct Cost: ¥3,700,000、Indirect Cost: ¥1,110,000)
Keywords深層学習 / 視覚情報処理 / 感性情報処理 / 神経科学 / 人工知能 / 深層ニューラルネットワーク / 深層ニューラルネット
Outline of Research at the Start

われわれの脳は、発達過程における自然な視覚体験を通じて、基本的な視覚・感性認知機能を自律的に獲得している。本研究は、脳の学習原理や情報処理制約、ネットワーク構造を定式化し、さまざまな認知機能に対応した視覚情報表現を自己組織的に獲得する深層学習フレームワークの構築を目指す。そして、サルの視覚野から網羅的に記録した神経活動データを評価尺度として、提案モデルの生物学的妥当性を検証したうえで、その情報表現と感性表現との関係性を明らかにする。

Outline of Final Research Achievements

In this study, we developed a deep neural network that acquires a representation style similar to the brain's visual information representation based on the knowledge of visual information processing in the brain, learning principles, information processing constraints, and network structure. We analyzed the deep neural network from the viewpoint of sensory informatics, and measured and verified functional brain activity data. Specifically, we analyzed 1) neural networks for video processing, 2) analyzed visual representations using adversarial generative neural networks (GAN), which is an unsupervised learning framework, and developed them into hardware implementations, and 3) examined fNIRS measurements, neural recordings using multi-point electrodes. We also investigated 4) conceptual information representations in visual, language, and brain information. The research results were presented at conferences and published in papers.

Academic Significance and Societal Importance of the Research Achievements

本研究成果で得られた深層学習フレームワークに関する知見は、脳が符号化する視覚情報表現と近い情報表現の機械学習による獲得手法に関して新たな知見を提供した点で学術的意義があると考える。将来、記録した神経活動データから、視覚体験を可視化するブレイン・マシン・インタフェース技術のような、工学応用を通して、より社会の実現に貢献できると考える。

Report

(3 results)
  • 2021 Final Research Report ( PDF )
  • 2020 Annual Research Report
  • 2019 Annual Research Report
  • Research Products

    (10 results)

All 2021 2020 2019 Other

All Journal Article (3 results) (of which Open Access: 2 results,  Peer Reviewed: 1 results) Presentation (5 results) (of which Int'l Joint Research: 3 results,  Invited: 1 results) Remarks (2 results)

  • [Journal Article] 視覚野の計算モデル:教師なし学習手法による視覚情報の表現分離2021

    • Author(s)
      林 隆介
    • Journal Title

      VISION

      Volume: 33 Issue: 2 Pages: 63-76

    • DOI

      10.24636/vision.33.2_63

    • NAID

      130008028947

    • ISSN
      0917-1142, 2433-5630
    • Year and Date
      2021-04-20
    • Related Report
      2020 Annual Research Report
    • Open Access
  • [Journal Article] Reduced intra- and inter-individual diversity of semantic representations in the brains of schizophrenia patients2020

    • Author(s)
      Satoshi Nishida, Yukiko Matsumoto, Naganobu Yoshikawa, Shuraku Son, Akio Murakami, Ryusuke Hayashi, Shinji Nishimoto, Hidehiko Takahashi
    • Journal Title

      bioRxiv 2020

      Volume: 2020 Pages: 1-41

    • DOI

      10.1101/2020.06.03.132928

    • Related Report
      2020 Annual Research Report
    • Open Access
  • [Journal Article] 顔のテクスチャ情報が表情認知に与える影響2020

    • Author(s)
      河原 美彩子, 林 隆介, 田中 章浩
    • Journal Title

      信学技報(電子情報通信学会技術研究報告)

      Volume: 120-169 Pages: 13-18

    • Related Report
      2020 Annual Research Report
    • Peer Reviewed
  • [Presentation] 視覚野の計算モデル: 教師なし学習手法による視覚情報の表現分離2021

    • Author(s)
      林 隆介
    • Organizer
      日本視覚学会2021年冬季大会
    • Related Report
      2020 Annual Research Report
    • Invited
  • [Presentation] 3D reconstruction of hemodynamic responses using fNIRS signals measured on the surface of macaque monkeys’ skull2020

    • Author(s)
      R. Hayashi, O. Yamashita, T. Yamada, H. Kawaguchi, N. Higo
    • Organizer
      FENS 2020
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 顔のテクスチャ情報が表情認知に与える影響2020

    • Author(s)
      河原 美彩子, 林 隆介, 田中 章浩
    • Organizer
      ヒューマン情報処理研究会
    • Related Report
      2020 Annual Research Report
  • [Presentation] Neural ensemble representation of view orientation in monkey inferior temporal cortex: A comparison between face and object processing2019

    • Author(s)
      R. Hayashi
    • Organizer
      APCV2019
    • Related Report
      2019 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Schizophrenia reduces intra- and inter-individual variability of semantic representations in the brain2019

    • Author(s)
      Satoshi Nishida, Yukiko Matsumoto, Naganobu Yoshikawa, Shuraku Son, Akio Murakami, Ryusuke Hayashi, Hidehiko Takahashi, Shinji Nishimoto
    • Organizer
      OHBM2019
    • Related Report
      2019 Annual Research Report
    • Int'l Joint Research
  • [Remarks] 産業技術総合研究所 人間情報インタラクション研究部門 ニューロリハビリテーション研究グループ

    • URL

      https://unit.aist.go.jp/hiiri/nrehrg/index.html

    • Related Report
      2020 Annual Research Report
  • [Remarks] 産業技術総合研究所 人間情報インタラクション研究部門 ニューロリハビリテーション研究グループ

    • URL

      https://unit.aist.go.jp/hiri/nrrg/research/index.html

    • Related Report
      2019 Annual Research Report

URL: 

Published: 2019-04-18   Modified: 2025-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi