• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

An embedded brain-like computer system in spatio-temporal domain and its application to a home service robot

Research Project

Project/Area Number 23K28158
Project/Area Number (Other) 23H03468 (2023)
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeMulti-year Fund (2024)
Single-year Grants (2023)
Section一般
Review Section Basic Section 61040:Soft computing-related
Research InstitutionKyushu Institute of Technology

Principal Investigator

田向 権  九州工業大学, 大学院生命体工学研究科, 教授 (90432955)

Co-Investigator(Kenkyū-buntansha) 香取 勇一  公立はこだて未来大学, システム情報科学部, 教授 (20557607)
PRAMANTA DINDA  九州情報大学, 経営情報学部, 助教 (50911393)
田中 悠一朗  九州工業大学, 大学院生命体工学研究科, 准教授 (70911288)
末竹 規哲  山口大学, 大学院創成科学研究科, 教授 (80334051)
Project Period (FY) 2023-04-01 – 2027-03-31
Project Status Granted (Fiscal Year 2024)
Budget Amount *help
¥18,590,000 (Direct Cost: ¥14,300,000、Indirect Cost: ¥4,290,000)
Fiscal Year 2026: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2025: ¥8,320,000 (Direct Cost: ¥6,400,000、Indirect Cost: ¥1,920,000)
Fiscal Year 2024: ¥5,070,000 (Direct Cost: ¥3,900,000、Indirect Cost: ¥1,170,000)
Fiscal Year 2023: ¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
Keywords脳型計算機システム / 時空間領域 / ホームサービスロボット / ディジタルハードウェア / レザバーコンピューティング / FPGA / 半導体 / 集積回路 / ニューロモルフィック / 大規模言語モデル / ロボカップ
Outline of Research at the Start

時間・空間の両方から並列性とダイナミクスを活用するニューラルネットの理論と専用アーキテクチャを構築することで回路規模や消費電力を徹底的に削減し“モノの中に組込む脳型計算機”を実現する.再構成可能半導体FPGAの柔軟性・高速性と省電力性を活かした脳型再構成デバイスを開発,ホームサービスロボットへと応用し,RoboCup競技会を通し実用性を示す.

Outline of Annual Research Achievements

本研究は,モノの中に組込む脳型計算機システムの実現を目指し,理論,回路,応用の3本の柱から構成される.
理論班:レザバーコンピューティングのモデル研究を進めた.リーク率の異なる小規模なレザバーを複数集めるマルチレザバーを提案し,入力信号から様々な周波数成分に依存した特徴量を抽出することに成功した.また,マルチリードアウトと組合せることで,認識精度の向上も示された.これらをジェスチャー認識へと応用してその有効性を示した.
回路班:レザバーコンピューティングのディジタル回路実装について研究を進めた.様々なハードウェア指向のアルゴリズムを構築してその有効性を示した.特に,Field Programmable Gate Array (FPGA)の構成要素であるLook Up Table(LUT)をレザバーのノードとして見立てるLUT-Netにてレザバーを構築したところ,極めて小規模の回路リソースで高性能なレザバーを実装可能なことが分かった.FPGAの主要会議の一つであるICFPTでの発表に繋がった.
応用班:ホームサービスロボットに関する研究開発を進めた.特に,大規模言語モデル(Large Language Model: LLM)によるロボット行動生成手法を提案し,人間から与えられた自然言語による命令,例えば「レモンをキッチンからとってきて」という文章より,ロボットの行動を適切に生成することができた.他にもロボットビジョンとLLMの組み合わせなどについて研究を進めた.
本研究の成果をホームロボットへと集約,RoboCup Japan Open 2023 優勝,世界大会RoboCup @Home Domestic Standard Platform League 準優勝など好成績を果たした.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本研究はおおむね順調に進展している.理論班,回路班共に計画通りの進捗である.また,ロボット応用は様々な要因で時間がかかり,かつ,近年はAI適用において急激な進化を遂げる.我々はLLMを積極的にキャッチアップしてロボットへ導入することに成功しており,急速な進化にも対応できている.今後,理論班,回路班が進める研究と組合わせることにより,モノの中に組込む脳型計算機システムの実現へ近づくものと考える.

Strategy for Future Research Activity

引き続き,理論,回路,応用の3本柱での研究開発を進める.これらが一体となることで,真に有用な脳型計算機システムの実現につながると考えている.今後は特に,LLMとローカルなAIの組み合わせが重要になると考えており,回路や応用面から理論的考察を進めていきたい.

Report

(1 results)
  • 2023 Annual Research Report
  • Research Products

    (15 results)

All 2024 2023 Other

All Journal Article (3 results) (of which Peer Reviewed: 3 results,  Open Access: 3 results) Presentation (10 results) (of which Int'l Joint Research: 10 results) Remarks (2 results)

  • [Journal Article] Reservoir-Based 1D Convolution: Low-Training-Cost AI2024

    • Author(s)
      TANAKA Yuichiro、TAMUKOH Hakaru
    • Journal Title

      IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences

      Volume: E107.A Issue: 6 Pages: 941-944

    • DOI

      10.1587/transfun.2023EAL2050

    • ISSN
      0916-8508, 1745-1337
    • Year and Date
      2024-06-01
    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Self-Organizing Multiple Readouts for Reservoir Computing2023

    • Author(s)
      Tanaka Yuichiro、Tamukoh Hakaru
    • Journal Title

      IEEE Access

      Volume: 11 Pages: 138839-138849

    • DOI

      10.1109/access.2023.3340311

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Development of a Highly Accurate Person Tracking System for Home Service Robots2023

    • Author(s)
      Ono Tomohiro、Abe Yushi、Ishida Yutaro、Shibata Tomohiro、Tamukoh Hakaru
    • Journal Title

      Journal of the Robotics Society of Japan

      Volume: 41 Issue: 2 Pages: 198-201

    • DOI

      10.7210/jrsj.41.198

    • ISSN
      0289-1824, 1884-7145
    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] Traffic Flow Optimization using a Chaotic Boltzmann Machine Annealer on an FPGA2023

    • Author(s)
      Kanta Yoshioka, Yuichiro Tanaka and Hakaru Tamukoh
    • Organizer
      2023 International Conference on Field-Programmable Technology (FPT'23)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] LUTNet-RC: Look-Up Tables Networks for Reservoir Computing on an FPGA2023

    • Author(s)
      Kanta Yoshioka, Yuichiro Tanaka and Hakaru Tamukoh
    • Organizer
      2023 International Conference on Field-Programmable Technology (FPT'23)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] A Tri-modal Fusion Network for Object Detection Using Small Amounts of Low-Quality Data2023

    • Author(s)
      Yusuke Watanabe, Yuma Yoshimoto and Hakaru Tamukoh
    • Organizer
      11th International Conference on Informatics, Electronics & Vision (ICIEV)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Simulator-based Dataset Generator for Pothole Detection in Autonomous Driving2023

    • Author(s)
      Yuga Yano, Yukiya Fukuda and Hakaru Tamukoh
    • Organizer
      11th International Conference on Informatics, Electronics & Vision (ICIEV)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] ManifoldNeRF: View-dependent Image Feature Supervision for Few-shot Neural Radiance Fields2023

    • Author(s)
      Daiju Kanaoka, Motoharu Sonogashira, Hakaru Tamukoh, Yasutomo Kawanishi
    • Organizer
      The 34th British Machine Vision Conference (BMVC2023)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Robust Trash Can Lid Opening System2023

    • Author(s)
      Kosei Isomoto, Yuga Yano, Yuichiro Tanaka and Hakaru Tamukoh
    • Organizer
      2023 International Workshop on Smart Info-Media Systems in Asia (SISA2023)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Autonomous Waiter Robot System for Recognizing Customers, Taking Orders, and Serving Food2023

    • Author(s)
      Yuga Yano, Kosei Isomoto,Tomohiro Ono, Hakaru Tamukoh
    • Organizer
      RoboCup 2023: Robot World Cup XXVI
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Dense Traversability Estimation System For Extreme Environments2023

    • Author(s)
      Yukiya Fukuda, Yuya Mii, Yuga Yano, Hidenari Iwai, Shintaro Inoue, Hakaru Tamukoh
    • Organizer
      IEEE Intelligent Vehicles Symposium (IEEE IV23)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Ensemble Learning of Multiple Readouts for Reservoir Computing2023

    • Author(s)
      Yuichiro Tanaka, Hakaru Tamukoh
    • Organizer
      2023 International Symposium on Nonlinear Theory and Its Applications (NOLTA2023)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] FPGA Implementation of a Chaotic Boltzmann Machine Annealer2023

    • Author(s)
      Kanta Yoshioka, Yuichi Katori, Yuichiro Tanaka, Osamu Nomura, Takashi Morie and Hakaru Tamukoh
    • Organizer
      International Joint Conference on Neural Networks (IJCNN2023)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Remarks] Tamukoh Laboratory

    • URL

      https://www.brain.kyutech.ac.jp/~tamukoh/

    • Related Report
      2023 Annual Research Report
  • [Remarks] Hibikino-Musashi@Home

    • URL

      https://www.brain.kyutech.ac.jp/~hma/ja/top/

    • Related Report
      2023 Annual Research Report

URL: 

Published: 2023-04-18   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi