• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Development of support system for AI-based human perception

Research Project

Project/Area Number 21K12006
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61020:Human interface and interaction-related
Research InstitutionNational Institute for Basic Biology

Principal Investigator

渡辺 英治  基礎生物学研究所, 神経生理学研究室, 准教授 (30250252)

Project Period (FY) 2021-04-01 – 2026-03-31
Project Status Granted (Fiscal Year 2024)
Budget Amount *help
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2024: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2023: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2022: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2021: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Keywords深層学習 / 視覚 / 錯視 / 人工知能 / 事故 / 色覚 / 知覚 / 脳 / 交通事故 / 運転 / 予測符号化 / AI / 知覚支援
Outline of Research at the Start

私たちはAI技術を活用して人の視覚シミュレーターの開発を進めている。本AIでは、 人の視覚上のエラーである動く錯視も再現される。人が知覚を苦手とする状況を評価するこ とができることから、人の知覚ミスによる事故を減らすツールへの活用が期待されている。 そこで本研究では技術を実利用できるように、動く錯視以外にも、形、色、位置、サイズな どの錯視を再現できるように教師データの充実、アルゴリズムの最適化を行う。さらには、 同AIで音声データを学習させ、聴覚シミュレーターへの拡張も試みる。本研究では、AI 技術を人の知覚を支援するシステムの高度化に幅広く活用できるように発展させていく。

Outline of Annual Research Achievements

本研究プロジェクトでは、視覚のエラー現象が要因となる事故を未然に防ぐため、視覚支援を可能とするAIモデルの基礎開発を進めている。人の視覚特性をモデル化したAIを人の視覚シミュレーターとして活用することを目標とし、エラー現象である視覚の錯覚現象を再現させるようにAIを学習させている。錯視としては、動きの錯視、色の錯視、形の錯視、位置の錯視を選定し、昨年度までに動きの錯視および色の錯視についての知見を得た。その一部の研究結果を査読付き論文として国際誌に2報発表した。本年度は色の錯視について、深耕研究を行い大きな進展をみた。
対象とした現象は、フェヒナーの主観色と呼ばれている錯視であり、発見から200年経つが未だにその原因が謎のままである。フェヒナーの主観色は白黒のデザインでありながら、動きにともなって人に色を知覚させる。私たちが開発したAIモデルは、このフェヒナーの主観色を見事に再現した。本来であれば、ここでAIモデルの開発成功として研究は完了となるが、私たちはさらにこのAIモデルを利用して200年来の謎に挑んだ。その結果、主観色の発生は学習のもとになっている動画の色特性に依存していることが判明した。しかも動画中の動いているオブジェクト(人や車)の色特性が重要な要因であることが明らかとなった。このことを証明するために、人工的な動画すなわち3Dアニメーション、2Dアニメーションの作成を行い、動くオブジェクトの色の制御実験を行った。これらの動画を学習させることにより、主観色の発生は動くオブジェクトに依存していることが証明された。本発見の論文投稿を現在準備している。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

当初の計画では、動きの錯視は10種を検討する予定としていたが、2022年度に300種類にまで拡張させAIモデルの精度を確認した(論文として報告済み)。続く2023年度にはAIモデルが予測した動きの錯視のメカニズム(要素仮説)の実証心理実験を行い、仮説の証明をおこなった(論文として報告済み)。さらには同年度に色の錯視の検討を行い、AIモデルが創り出した色の錯視について、実証心理実験を行った。本年度(2024年度)は、この色の錯視について深耕研究を進め、その発生メカニズムに迫った。
AIモデルを開発することを目的とした研究からすると、予定とは少し異なる方向性となったが、動きの錯視や色の錯視を再現するAIモデルを得たことには違いなく、またその特性から人の視覚のメカニズムの一端を明らかにしたことは大いに意義があると考える。研究はおおむね順調に進展していると言えると思う。

Strategy for Future Research Activity

本来であれば2024年度が本プロジェクトの最終年度にあたるが、フェヒナーの主観色に関する論文発表がまだできていない。それを最優先にさせたい。さらには、まだ手をつけていない形の錯視10種、位置の錯視10種を選定して、錯視が生じているかを判定していく。
形の錯視、位置の錯視についても予備実験の段階ではAIモデルは再現していることが分かっている。こちらは動きの錯視や色の錯視のような深耕研究へは発展させずにAIモデルの妥当性を示すデータとしたい。いずれにしても2025年度が本研究プロジェクトの最終年度にあたるため、学会報告と論文の報告を欠かずに進めていく。

Report

(4 results)
  • 2024 Research-status Report
  • 2023 Research-status Report
  • 2022 Research-status Report
  • 2021 Research-status Report
  • Research Products

    (44 results)

All 2025 2024 2023 2022 2021 Other

All Journal Article (11 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 10 results,  Open Access: 9 results) Presentation (30 results) (of which Int'l Joint Research: 3 results,  Invited: 10 results) Book (1 results) Remarks (2 results)

  • [Journal Article] Application of deep learning for evaluation of the growth rate of Daphnia magna2025

    • Author(s)
      Inagaki Shinsuke、Kondo Yohei、Religia Pijar、Adhitama Nikko、Kato Yasuhiko、Watanabe Eiji、Watanabe Hajime
    • Journal Title

      Journal of Bioscience and Bioengineering

      Volume: 139 Issue: 5 Pages: 384-391

    • DOI

      10.1016/j.jbiosc.2025.01.006

    • Related Report
      2024 Research-status Report
  • [Journal Article] Multi-scale dynamics by adjusting the leaking rate to enhance the performance of deep echo state networks2024

    • Author(s)
      Inoue Shuichi、Nobukawa Sou、Nishimura Haruhiko、Watanabe Eiji、Isokawa Teijiro
    • Journal Title

      Frontiers in Artificial Intelligence

      Volume: 7 Pages: 1397915-1397915

    • DOI

      10.3389/frai.2024.1397915

    • Related Report
      2024 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Deep Neural Network Model of Visual Information Processing in the Brain2023

    • Author(s)
      渡辺 英治
    • Journal Title

      Journal of The Society of Instrument and Control Engineers

      Volume: 62 Issue: 10 Pages: 616-623

    • DOI

      10.11499/sicejl.62.616

    • ISSN
      0453-4662, 1883-8170
    • Year and Date
      2023-10-10
    • Related Report
      2023 Research-status Report
    • Peer Reviewed
  • [Journal Article] Integration of motion information in illusory motion perceived in stationary patterns2023

    • Author(s)
      Kobayashi Taisuke、Watanabe Eiji
    • Journal Title

      Scientific Reports

      Volume: 13 Issue: 1 Pages: 21107-21107

    • DOI

      10.1038/s41598-023-48265-4

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Analysis of Driver’s Predictive Characteristics using Eye Tracking and a Deep Learning Model that Mimics Human Vision2023

    • Author(s)
      關 嵩覚、雨宮 瑞希、加藤 正隆、江村 恒一、渡辺 英治
    • Journal Title

      Transactions of Society of Automotive Engineers of Japan

      Volume: 54 Issue: 3 Pages: 628-634

    • DOI

      10.11351/jsaeronbun.54.628

    • ISSN
      0287-8321, 1883-0811
    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Evolutionary differentiation of androgen receptor is responsible for sexual characteristic development in a teleost fish2023

    • Author(s)
      Y. Ogino, S. Ansai, E. Watanabe, M. Yasugi, Y. Katayama, H. Sakamoto, K. Okamoto, K. Okubo, Y. Yamamoto, I. Hara, T. Yamazaki, A. Kato, Y. Kamei, K. Naruse, K. Ohta, H. Ogino, T. Sakamoto, S. Miyagawa, T. Sato, G. Yamada, M. Baker & T. Iguchi
    • Journal Title

      Nature communications

      Volume: 14 Issue: 1 Pages: 1428-1428

    • DOI

      10.1038/s41467-023-37026-6

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Deep Neural Networks that Reproduce Human Vision Perception While Driving2022

    • Author(s)
      江村 恒一、加藤 正隆、渡辺 英治
    • Journal Title

      Transactions of Society of Automotive Engineers of Japan

      Volume: 53 Issue: 6 Pages: 1102-1107

    • DOI

      10.11351/jsaeronbun.53.1102

    • ISSN
      0287-8321, 1883-0811
    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Analysis of Factors Causing Traffic Near-miss Events using Deep Neural Networks Trained to Simulate Human Vision2022

    • Author(s)
      加藤 正隆、江村 恒一、渡辺 英治
    • Journal Title

      Transactions of Society of Automotive Engineers of Japan

      Volume: 53 Issue: 6 Pages: 1108-1113

    • DOI

      10.11351/jsaeronbun.53.1108

    • ISSN
      0287-8321, 1883-0811
    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Origin of the ease of association of color names: Comparison between humans and AI2022

    • Author(s)
      Komatsu Hidehiko、Maeno Ami、Watanabe Eiji
    • Journal Title

      i-Perception

      Volume: 13 Issue: 5

    • DOI

      10.1177/20416695221131832

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Laterally biased diffusion of males of the water flea Daphnia magna2022

    • Author(s)
      Toyota Kenji、Yasugi Masaki、Tatarazako Norihisa、Iguchi Taisen、Watanabe Eiji
    • Journal Title

      Journal of Experimental Zoology Part A: Ecological and Integrative Physiology

      Volume: 337 Issue: 6 Pages: 626-638

    • DOI

      10.1002/jez.2595

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Motion illusion-like patterns extracted from photo and art images using predictive deep neural networks2022

    • Author(s)
      Taisuke Kobayashi, Akiyoshi Kitaoka, Manabu Kosaka, Kenta Tanaka & Eiji Watanabe
    • Journal Title

      Scientific Reports

      Volume: 3893 Issue: 1

    • DOI

      10.1038/s41598-022-07438-3

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] Using SlowFast Networks for Near-Miss Incident Analysis in Dashcam Videos2024

    • Author(s)
      Yucheng Zhang , Koichi Emura , Eiji Watanabe
    • Organizer
      30th ITS World Congress
    • Related Report
      2024 Research-status Report
    • Int'l Joint Research
  • [Presentation] Multi-Timescale Processing with Heterogeneous Assembly Echo State Networks2024

    • Author(s)
      Sota Yoshida , Takahiro Iinuma , Sou Nobukawa , Eiji Watanabe , Teijiro Isokawa
    • Organizer
      31st International Conference on Neural Information Processing (ICONIP2024)
    • Related Report
      2024 Research-status Report
    • Int'l Joint Research
  • [Presentation] Impact of Cataracts on the Rotating Snakes Illusion: Insights from Artificial Neural Networks and Psychological Studies2024

    • Author(s)
      Kyohei Ueda, Kyoko Fujita, Eiji Suzuki, Eiji Watanabe
    • Organizer
      日本神経科学
    • Related Report
      2024 Research-status Report
  • [Presentation] ビデオ予測を行う深層学習ネットワークが再現する運動残効2023

    • Author(s)
      小林汰輔、渡辺英治
    • Organizer
      日本神経科学大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 予測符号化を実装した深層ニューラルネットワークによるフェヒナー・ベンハム主観色の再現2023

    • Author(s)
      上田恭平、Lana Sinapayen、小林汰輔、渡辺英治
    • Organizer
      日本神経科学大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 予測符号化DNNの学習における画像ブレの影響に関する研究2023

    • Author(s)
      加藤 京介,、小林 汰輔、渡辺 英治、栗木 一郎
    • Organizer
      神経回路学会
    • Related Report
      2023 Research-status Report
  • [Presentation] ビデオ予測を行う深層学習ネットワークが再現する運動残効2023

    • Author(s)
      小林汰輔、渡辺英治
    • Organizer
      神経回路学会
    • Related Report
      2023 Research-status Report
  • [Presentation] 蛇の回転錯視への白内障の影響2023

    • Author(s)
      上田恭平, 藤田京子, 鈴木栄二, 小林汰輔, 渡辺英治
    • Organizer
      視覚学会
    • Related Report
      2023 Research-status Report
  • [Presentation] Reproduction of subjective color using deep neural network2023

    • Author(s)
      上田恭平、Lana Sinapayen、小林汰輔、渡辺英治
    • Organizer
      神経回路学会
    • Related Report
      2023 Research-status Report
  • [Presentation] Deep Echo State Networkにおけるリークレートの最適化による機能増強2023

    • Author(s)
      井上秀一、信川 創、西村治彦、渡辺英治、礒川悌次郎
    • Organizer
      電子情報通信学会
    • Related Report
      2022 Research-status Report
  • [Presentation] ヒトの視覚を模倣する深層ニューラルネットワーク2023

    • Author(s)
      渡辺英治
    • Organizer
      統計数理研究所共同利用研究集会
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] 残差信号による錯視効果時間の伸長2023

    • Author(s)
      小林汰輔、渡辺英治
    • Organizer
      日本視覚学会2023年冬季大会
    • Related Report
      2022 Research-status Report
  • [Presentation] AIによる錯視現象の探求2023

    • Author(s)
      渡辺英治
    • Organizer
      認知科学研究センタ研究会
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] 深層ニューラルネットワークによる錯視現象の探求2022

    • Author(s)
      渡辺英治
    • Organizer
      生理研研究会
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] 視線計測と人の視覚を模倣する深層学習モデルによる運転者の予測特性の解析2022

    • Author(s)
      關 嵩覚、雨宮 瑞希、加藤 正隆、江村 恒一、渡辺 英治
    • Organizer
      自動車技術会
    • Related Report
      2022 Research-status Report
  • [Presentation] 回転サンプリングされた主観的超解像表示に対する PredNetによる見えの推定2022

    • Author(s)
      嶋村海人、八杉公基、時本豊太郎、渡辺英治、陶山史朗、山本裕紹
    • Organizer
      日本光学会
    • Related Report
      2022 Research-status Report
  • [Presentation] 深層学習による"動く錯視"の再現と合成2022

    • Author(s)
      渡辺英治
    • Organizer
      AI Optics研究会
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] 画像ブレによる予測符号化DNNの学習高速化の検討2022

    • Author(s)
      斉藤 輝、篠崎隆志、渡辺英治、栗木一郎
    • Organizer
      視覚学会
    • Related Report
      2022 Research-status Report
  • [Presentation] 予測符号化を基本原理としたANNが再現する視覚現象とその研究展開2022

    • Author(s)
      小林汰輔、渡辺英治
    • Organizer
      視覚学会
    • Related Report
      2022 Research-status Report
  • [Presentation] 運動錯視への色と空間情報の効果2022

    • Author(s)
      小林汰輔、渡辺英治
    • Organizer
      神経科学学会
    • Related Report
      2022 Research-status Report
  • [Presentation] 深層ニューラルネットワークによる錯覚現象の研究2022

    • Author(s)
      渡辺英治
    • Organizer
      音響学会講演会
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] Evolutionary generation of visual motion illusions2022

    • Author(s)
      Lana Sinapayen, Eiji Watanabe
    • Organizer
      AROB-ISBC-SWARM 2022
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] 人工知能における錯視2021

    • Author(s)
      渡辺英治
    • Organizer
      日本神経回路学会
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] 深層学習が拓く視覚メカニズムの可視化2021

    • Author(s)
      渡辺英治
    • Organizer
      コンピューテーショナル・インテリジェンス・フォーラム 2021
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] ヒト型知覚AIが心理学に出会う2021

    • Author(s)
      渡辺英治
    • Organizer
      シンギュラリティサロン
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] 人工知能を通して見た錯視2021

    • Author(s)
      渡辺英治
    • Organizer
      日本人工知能学会
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] 運転における人の視覚を再現する深層学習モデル2021

    • Author(s)
      江村恒一, 加藤正隆, 渡辺英治
    • Organizer
      自動車技術会春季大会学術講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 人の視覚をシミュレートする深層学習を用いた交通ヒヤリハット事象の要因分析2021

    • Author(s)
      加藤正隆, 江村恒一, 渡辺英治
    • Organizer
      自動車技術会春季大会学術講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 深層学習による錯視研究の現状2021

    • Author(s)
      渡辺英治
    • Organizer
      日本基礎心理学会
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] Computational and psychophysical estimation of fundamental principles underlying the rotating snake illusion2021

    • Author(s)
      Taisuke Kobayashi, Eiji Watanabe
    • Organizer
      日本神経科学
    • Related Report
      2021 Research-status Report
  • [Book] 月刊「細胞」2024年4月号 ライフサイエンス分野におけるAI解析2024

    • Author(s)
      渡辺 英治
    • Total Pages
      102
    • Publisher
      株式会社 北隆館
    • Related Report
      2024 Research-status Report
  • [Remarks] 色名の連想しやすさの起源:人間とAIの比較

    • URL

      https://www.nibb.ac.jp/press/2022/10/28.html

    • Related Report
      2022 Research-status Report
  • [Remarks] 深層ニューラルネットワークによって「動く錯視デザイン」の人工合成に成功

    • URL

      https://www.nibb.ac.jp/press/2022/03/10.html

    • Related Report
      2021 Research-status Report

URL: 

Published: 2021-04-28   Modified: 2025-12-26  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi