研究課題
短期記憶によるヒト大脳皮質の物体カテゴリ表現を検証する目的で、既存の脳内カテゴリ表現の可視化手法の改良を行ない、言語の特徴空間を介して自然視覚刺激と脳活動の関係性を記述するモデルの開発を行った。この手法を応用して、脳活動から意味知覚内容を解読する脳情報デコーディング技術を開発し、成果が国際学術論文誌NeuroImageのオンライン版に掲載された。この技術を、株式会社NTTデータと共同で実施している、脳活動に基づく映像コンテンツ評価の商用サービスに実装することで社会応用を実現した。またこれまでの研究成果をまとめて、脳内意味表現に関する解説論文を執筆し、その論文が国内学術論文誌の人工知能に掲載された。短期記憶の脳内カテゴリ表現を調べるための実験として、自然な視覚映像を短期記憶に保持することを要求する実験課題を設計し、その課題を遂行中の4名の被験者からfMRIによる脳活動計測を行った。なお、この実験については、情報通信研究機構の倫理委員会の承認および個人情報取り扱いの専門委員会の審査を経たうえで、実験前に実験内容および個人情報の取扱について被験者から同意を得て実施した。この4名の被験者については、実際に自然な視覚映像を見ている際の、知覚に関わる脳活動も取得しており、その際の脳内カテゴリ表現を定量化するモデルが構築されている。そのモデルを用いて、短期記憶時に脳内で保持されている自然な映像を解読可能か確かめたところ、十分な精度で解読が可能であることが分かった。また、短期記憶情報の脳内局在について調べたところ、大脳皮質のカテゴリ選択領域のうち特に高次の領野における表現が使われていることが分かった。以上の結果から、短期記憶において自然な視覚イメージは知覚時と似た表現を持って脳内に保持されているが、その表現はより抽象的で高次なものになっている可能性が示唆された。
すべて 2018 2017 その他
すべて 雑誌論文 (4件) (うち査読あり 4件) 学会発表 (21件) (うち国際学会 3件、 招待講演 6件) 備考 (1件) 産業財産権 (1件)
人工知能
巻: 32 ページ: 857-862
Proceedings of 2017 IEEE International Conference on Systems, Man, and Cybernetics
巻: - ページ: 606-611
10.1109/SMC.2017.8122673
NeuroImage
巻: 印刷中 ページ: 印刷中
10.1016/j.neuroimage.2017.08.017
日本化学会情報化学部会誌
巻: 35 ページ: 168-173
10.11546/cicsj.35.168
https://researchmap.jp/s-nishida/
