• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2019 年度 実施状況報告書

ヒト脳情報を統合した個性を有する人工知能システムの開発

研究課題

研究課題/領域番号 18K18141
研究機関国立研究開発法人情報通信研究機構

研究代表者

西田 知史  国立研究開発法人情報通信研究機構, 脳情報通信融合研究センター脳情報通信融合研究室, 主任研究員 (90751933)

研究期間 (年度) 2018-04-01 – 2021-03-31
キーワード人工知能 / 深層学習 / 畳み込みニューラルネット / 転移学習 / 脳 / fMRI
研究実績の概要

これまでにfMRI実験において収集した69名分の脳活動データに基づき、任意の視聴覚情報を深層学習に入力したうえで、いったん脳情報を介して、入力と結びついた認知ラベルを推定する手法の開発と改良を行った。特定の課題で訓練した機械学習のモデルを、別の課題に適用する枠組みを転移学習と呼ぶが、本手法は、脳情報を仲介して機械学習モデルの転移学習を行う方法論とみなせるため「脳媒介転移学習(Brain-mediated transfer learning; BTL)」と名付けた。そして、BTLを用いることで、脳情報を介さない既存の深層学習の転移学習との比較において、様々な課題(映像コンテンツ知覚の推定、映像から受ける印象の推定、Web広告に対する再生完了率等の推定、TV広告に対する好感度の推定、など)で推定精度の向上(汎化性能の向上)がもたらされることを実データによる検証で示した。また精度の向上は、脳情報が有効な推定課題(脳情報単独で推定を行った際に高い精度を示す課題)であるほど顕著に見られることが分かり、脳情報を既存の機械学習モデルに上手く結びつけて、モデルの情報表現を強化していることを示した。以上の成果を、人工知能分野のトップ会議の一つである国際会議AAAI(北米人工知能学会)、および国内学会の人工知能学会全国大会で発表した。その際、聴衆から高い評価を得たとともに、成果がメディアなどでも取り上げられた。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

当初の予定通り技術開発に成功し、その成果が権威ある国際学会に採択されて発表を行ったことから、研究は順調に進んでいるといえる。また、開発技術が個性の適用可能か検証するための心理データ収集も完了し、多角的な検証をすでに進めていることから、来年度に本研究が目指した最終的な成果を得ることが十分に期待できる。

今後の研究の推進方策

収集した心理データを基に、開発技術が知覚・認知の個人差を反映可能であることを検証する。また、そのような反映をより強くするための、技術の改良も進める。

次年度使用額が生じた理由

脳活動計測のためのMRI実験および知覚の個人差を評価するための心理実験のデータについて、別目的において予め取得していたデータを流用可能となり、データ取得のために必要となったはずの実験被験者謝金が不要となったため、次年度使用額が生じた。それについては、本研究で開発した技術の発展を目的とした、様々な派生技術の開発のために必要となるMRI実験および心理実験の被験者謝金等として利用することを計画している。

  • 研究成果

    (19件)

すべて 2020 2019 その他

すべて 雑誌論文 (3件) (うちオープンアクセス 3件、 査読あり 1件) 学会発表 (15件) (うち国際学会 8件、 招待講演 2件) 備考 (1件)

  • [雑誌論文] Expert programmers have fine-tuned cortical representations of source code2020

    • 著者名/発表者名
      Ikutani Yoshiharu、Kubo Takatomi、Nishida Satoshi、Hata Hideaki、Matsumoto Kenichi、Ikeda Kazushi、Nishimoto Shinji
    • 雑誌名

      bioRxiv

      巻: - ページ: -

    • DOI

      10.1101/2020.01.28.923953

    • オープンアクセス
  • [雑誌論文] Relational Network of People Constructed on the Basis of Similarity of Brain Activities2019

    • 著者名/発表者名
      Shinkuma Ryoichi、Nishida Satoshi、Kado Masataka、Maeda Naoya、Nishimoto Shinji
    • 雑誌名

      IEEE Access

      巻: 7 ページ: 110258~110266

    • DOI

      10.1109/ACCESS.2019.2933990

    • 査読あり / オープンアクセス
  • [雑誌論文] Brain-mediated Transfer Learning of Convolutional Neural Networks2019

    • 著者名/発表者名
      Satoshi Nishida, Yusuke Nakano, Antoine Blanc, Naoya Maeda, Masataka Kado, Shinji Nishimoto
    • 雑誌名

      arXiv

      巻: - ページ: -

    • オープンアクセス
  • [学会発表] Brain-mediated Transfer Learning of Convolutional Neural Networks2020

    • 著者名/発表者名
      Nishida S, Nakano Y, Blanc, A, Maeda N, Kado M, Nishimoto S
    • 学会等名
      Thirty-Fourth AAAI Conference on Artificial Intelligence
    • 国際学会
  • [学会発表] DX時代の最先端技術 消費者感性を予測する脳解読基盤「NeuroAI」: 脳情報とAIの融合2020

    • 著者名/発表者名
      西田知史
    • 学会等名
      NTT DATA Innovation Conference 2020
    • 招待講演
  • [学会発表] 統合失調症における脳内意味ネットワーク異常:エンコーディングモデルとグラフ理論解析を用いて2020

    • 著者名/発表者名
      松本有紀子, 西田知史, 孫樹洛, 村上晶郎, 吉川長伸, 林隆介, 西本伸志, 高橋英彦
    • 学会等名
      脳と心のメカニズム第20回冬のワークショップ
  • [学会発表] Toward Identifying the Neural Basis of Programming Expertise: an fMRI Study with Expert Programmers2020

    • 著者名/発表者名
      Ikutani Y, Kubo T, Nishida S, Hata H, Matsumoto K, Ikeda K, Nishimoto S
    • 学会等名
      脳と心のメカニズム第20回冬のワークショップ
  • [学会発表] Deep transfer learning mediated by human brain information2020

    • 著者名/発表者名
      Nishida S, Nakano Y, Blanc A, Maeda N, Kado M, Nishimoto S
    • 学会等名
      脳と心のメカニズム第20回冬のワークショップ
  • [学会発表] Towards the decoding of human natural perception for real-world applications2019

    • 著者名/発表者名
      Nishida S
    • 学会等名
      Applying Neuroscience to Business
    • 国際学会 / 招待講演
  • [学会発表] A Study on a Correlation between a Predictive Model of Motion Pictures Imitating the Predictive Coding of the Cerebral Cortex and Brain Activity2019

    • 著者名/発表者名
      Fujiyama C, Nishimoto S, Nishida S, Asoh H, Kobayashi I
    • 学会等名
      2019 Conference on Cognitive Computational Neuroscience
    • 国際学会
  • [学会発表] Analysis of Correspondence Relationship between Brain Activity and Semantic Representation2019

    • 著者名/発表者名
      Ozaki K, Nishida S, Nishimoto S, Asoh H, Kobayashi I
    • 学会等名
      2019 Conference on Cognitive Computational Neuroscience
    • 国際学会
  • [学会発表] Toward Identifying the Neural Basis of Programming Expertise: an fMRI Study with Expert Programmers2019

    • 著者名/発表者名
      Ikutani Y, Kubo T, Nishida S, Hata H, Matsumoto K, Ikeda K, Nishimoto S
    • 学会等名
      APSIPA BioSiPS Workshop 2019
    • 国際学会
  • [学会発表] Abnormal semantic network in the schizophrenia brain: an encoding modeling and graph theoretic approach2019

    • 著者名/発表者名
      Matsumoto Y, Nishida S, Son S, Murakami A, Yoshikawa N, Hayashi R, Nishimoto S, Takahashi H
    • 学会等名
      第42回日本神経科学大会
  • [学会発表] Genetic contribution to inter-individual differences in human natural audio-visual experiences2019

    • 著者名/発表者名
      Toyoda S, Nishida S, Honda C, Watanabe M, Ollikainen M, Vuoksimaa E, Kaprio J, Osaka Twin Research Group, Nishimoto S
    • 学会等名
      The 2019 Behavior Genetics Association Meeting
    • 国際学会
  • [学会発表] Functional subdivisions around FEF revealed by multi-modal modeling of movie-evoked activity2019

    • 著者名/発表者名
      Yamaguchi H, Nishida S, Nakai T, Nishimoto S
    • 学会等名
      2019 Organization for Human Brain Mapping Annual Meeting
    • 国際学会
  • [学会発表] Schizophrenia reduces intra- and inter-individual diversity of semantic representations in the brain2019

    • 著者名/発表者名
      Nishida S, Matsumoto Y, Yoshikawa N, Son S, Murakami A, Hayashi R, Takahashi H, Nishimoto S
    • 学会等名
      2019 Organization for Human Brain Mapping Annual Meeting
    • 国際学会
  • [学会発表] 脳内情報表現の融合による深層学習ネットワークの認識能力向上2019

    • 著者名/発表者名
      西田知史, 西本伸志
    • 学会等名
      第33回人工知能学会全国大会
  • [学会発表] 深層学習を用いた動画刺激時の脳活動データからの文生成2019

    • 著者名/発表者名
      張嘉瑩, 西田知史, 西本伸志, 小林 一郎
    • 学会等名
      第33回人工知能学会全国大会
  • [備考] 西田 知史 (Satoshi Nishida)

    • URL

      https://sites.google.com/site/satnishida/

URL: 

公開日: 2021-01-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi