• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

生活支援ロボットの多拠点間マルチモーダル知識転移を実現するシステム基盤創成

研究課題

研究課題/領域番号 22K12212
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分61050:知能ロボティクス関連
研究機関立命館大学

研究代表者

萩原 良信  立命館大学, 総合科学技術研究機構, 准教授 (20609416)

研究期間 (年度) 2022-04-01 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2024年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
2023年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
2022年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
キーワード転移学習 / 記号創発ロボティクス / 生活支援ロボット / カテゴリゼーション / 生成モデル / ベイズ推論 / 知識転移
研究開始時の研究の概要

家庭環境は,未知の物体や場所の知識で溢れている.生活支援ロボットがこれらの知識をユーザとの限られたインタラクションの中から獲得するには,ロボット個体が得た観測のみならず,複数ロボットが獲得した知識も活用しながら学習する事が望ましい.本研究では,複数ロボットが獲得した観測から物体や場所の一般的な知識を形成し,この知識を効果的に用いた環境適応を実現する知識転移システムの基盤を創成する.これにより,多様なユーザや環境とのインタラクションに根ざした一般常識の形成と一般常識を効果的に用いた環境適応を可能とする自律的な転移学習システムの設計論の道が開かれる.

研究実績の概要

今年度は,前年度に開発した学習モジュールを実際の複数ロボットにおいて実現する計算論モデルを構築し,仮想環境の知識転移の実験において評価した.
具体的には,複数のロボットが異なる環境で獲得した観測をサーバ上に実装された汎化モジュールに集約し,ロボットに対して汎化された場所概念の学習を行った.また,この学習において推定されたモデルのパラメータを新規の環境で学習する他のロボットにおける場所概念モデルのプライア(事前分布)として与える事でロボット間の知識転移を実施した.この実験の結果,場所概念の知識転移を用いる事により,用いない場合よりも少ない学習データで高精度な場所の名前の予測が達成できる事を明らかになった.現在は,論文投稿に向けて知識転移に関する他手法(基盤モデルを用いた手法,環境間の知識転移の手法)との比較評価実験を進めている。
このとき,複数のロボットの観測が集まる汎化モジュールにおいては,膨大な観測情報からの推論が必要になり,計算コストが増大する.この問題に対して,効果的に学習データを収集するための能動学習の枠組みを当該システムに取り入れた.具体的には,情報利得に基づく場所概念の能動探索手法を基盤として期待自由エネルギーの計算を取り入れたモデルの研究を進めている.
さらに,実世界の多様な対象の学習を可能とするため,基盤モデル等の生成モデルに基づく場所概念モデルの拡張にも取り組み,MNIST等のデータセットにおいて予備実験を進めた.
今年度は,英語原著論文2件,国際会議論文3件,国内学会発表5件の研究成果を収めた.また,日本ロボット学会学術講演会において,HSRコミュニティ優秀論文賞,RoboCup Japan Open 2023において,日本ロボット学会賞,ロボカップ研究賞を受賞,同競技会の@Home DSPL Techinical Challengeにおいて準優勝を果たした.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

予定通り,ロボット間の知識転移のモデルを各ロボットに実装し,仮想環境での評価実験において提案モデルにより学習が高速化できる事が示された.また,論文執筆に向けた他手法との比較評価実験も順調に進んでいる.学習に用いるデータ収集のコストを低減するための能動学習の理論についても場所概念の能動学習のモデルを基盤として順調に調査と実装が進んでいる.さらに,実世界の多様な対象の表現学習のためのVAEに基づく学習モデルの構築も順調に進んでおり,次年度には,実世界画像を観測とした学習に移る予定である.以上のように,おおむね順調に進展している状況である.

今後の研究の推進方策

構成した計算論モデルを生活支援ロボットに実装して実践的なタスクにおける有効性を評価する.まず,シミュレータを用いた生活支援タスクの実験から当該モデルの有効性を評価する.シミュレータは,人間が仮想世界にログインしてロボットとインタラクションする事が可能な社会的知能発生学シミュレータ:SIGVerseを用いる.具体的には,クラウドサービスに汎化モジュールと個体モジュールを実装し,研究代表者が若手研究B(2015 年採択)で構築したマルチモーダル情報に基づく概念学習基盤:SIGVerse+L を用いてロボット間の概念の転移学習を行い,生活支援タスクにおける有効性を評価する.
次に,個体モジュールを実世界の生活支援ロボット:HSR(トヨタ自動車製)に実装し,実際の複数の家庭環境における当該モデルの有効性を評価する.実験は,SIGVerse の提案者である国立情報学研究所の稲邑哲也及び,代表者が委員を務めるロボット学会インテリジェントホームロボティクス研究会及びトヨタHSR コミュニティの支援を得て実施する.

報告書

(2件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 研究成果

    (20件)

すべて 2024 2023 2022

すべて 雑誌論文 (8件) (うち国際共著 2件、 査読あり 8件、 オープンアクセス 2件) 学会発表 (11件) 図書 (1件)

  • [雑誌論文] Interactive Learning System for 3D Semantic Segmentation with Autonomous Mobile Robots2024

    • 著者名/発表者名
      Akinori Kanechika, Lotfi El Hafi, Akira Taniguchi, Yoshinobu Hagiwara, Tadahiro Taniguchi
    • 雑誌名

      Proceedings of 2024 IEEE/SICE International Symposium on System Integration (SII 2024)

      巻: - ページ: 1274-1281

    • DOI

      10.1109/sii58957.2024.10417237

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Integrating probabilistic logic and multimodal spatial concepts for efficient robotic object search in home environments2023

    • 著者名/発表者名
      Hasegawa Shoichi、Taniguchi Akira、Hagiwara Yoshinobu、El Hafi Lotfi、Taniguchi Tadahiro
    • 雑誌名

      SICE Journal of Control, Measurement, and System Integration

      巻: 16 号: 1 ページ: 400-422

    • DOI

      10.1080/18824889.2023.2283954

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Active exploration based on information gain by particle filter for efficient spatial concept formation2023

    • 著者名/発表者名
      Taniguchi Akira、Tabuchi Yoshiki、Ishikawa Tomochika、El Hafi Lotfi、Hagiwara Yoshinobu、Taniguchi Tadahiro
    • 雑誌名

      Advanced Robotics

      巻: 37 号: 13 ページ: 840-870

    • DOI

      10.1080/01691864.2023.2225175

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Active Semantic Mapping for Household Robots: Rapid Indoor Adaptation and Reduced User Burden2023

    • 著者名/発表者名
      Ishikawa Tomochika、Taniguchi Akira、Hagiwara Yoshinobu、Taniguchi Tadahiro
    • 雑誌名

      2023 IEEE International Conference on Systems, Man, and Cybernetics (SMC)

      巻: - ページ: 3116-3123

    • DOI

      10.1109/smc53992.2023.10394143

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり
  • [雑誌論文] Exophora Resolution of Linguistic Instructions with a Demonstrative based on Real-World Multimodal Information2023

    • 著者名/発表者名
      Oyama Akira、Hasegawa Shoichi、Nakagawa Hikaru、Taniguchi Akira、Hagiwara Yoshinobu、Taniguchi Tadahiro
    • 雑誌名

      2023 32nd IEEE International Conference on Robot and Human Interactive Communication (RO-MAN)

      巻: - ページ: 2617-2623

    • DOI

      10.1109/ro-man57019.2023.10309487

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり
  • [雑誌論文] Inferring Place-Object Relationships by Integrating Probabilistic Logic and Multimodal Spatial Concepts2023

    • 著者名/発表者名
      Hasegawa Shoichi、Taniguchi Akira、Hagiwara Yoshinobu、El Hafi Lotfi、Taniguchi Tadahiro
    • 雑誌名

      2023 IEEE/SICE International Symposium on System Integration (SII)

      巻: - ページ: 1-8

    • DOI

      10.1109/sii55687.2023.10039318

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] Multimodal Object Categorization with Reduced User Load through Human-Robot Interaction in Mixed Reality2022

    • 著者名/発表者名
      Nakamura Hitoshi、Hafi Lotfi El、Taniguchi Akira、Hagiwara Yoshinobu、Taniguchi Tadahiro
    • 雑誌名

      2022 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS)

      巻: - ページ: 2143-2150

    • DOI

      10.1109/iros47612.2022.9981374

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Symbol Emergence as Inter-personal Categorization with Head-to-head Latent Word2022

    • 著者名/発表者名
      Furukawa Kazuma、Taniguchi Akira、Hagiwara Yoshinobu、Taniguchi Tadahiro
    • 雑誌名

      2022 IEEE International Conference on Development and Learning (ICDL)

      巻: - ページ: 60-67

    • DOI

      10.1109/icdl53763.2022.9962227

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [学会発表] 現場環境で学習した知識に基づく曖昧な発話からの生活物理支援タスク2023

    • 著者名/発表者名
      萩原良信,長谷川翔一,大山瑛,谷口彰,エルハフィロトフィ,谷口忠大
    • 学会等名
      第41回 日本ロボット学会 学術講演会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 生活支援ロボットの行動計画のための大規模言語モデルと場所概念モデルの活用2023

    • 著者名/発表者名
      長谷川翔一,伊藤昌樹,山木良輔,坂口太一,萩原良信,谷口彰,エルハフィロトフィ,谷口忠大
    • 学会等名
      第41回 日本ロボット学会 学術講演会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 自己蒸留と3次元地図を用いた生活支援ロボットによる類似物体探索2023

    • 著者名/発表者名
      坂口太一,谷口彰,萩原良信,谷口忠大
    • 学会等名
      第41回 日本ロボット学会 学術講演会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 地図とマルチモーダル場所概念の同時学習のための能動探索手法と基盤モデル活用2023

    • 著者名/発表者名
      石川 朋親、谷口 彰、萩原 良信、谷口 忠大
    • 学会等名
      第37回人工知能学会全国大会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 大規模言語モデルと場所概念モデルの統合による未観測物体の語彙を含んだ言語指示理解2023

    • 著者名/発表者名
      長谷川 翔一、山木 良輔、谷口 彰、萩原 良信、エル ハフィ ロトフィ、谷口 忠大
    • 学会等名
      第37回人工知能学会全国大会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 実世界のマルチモーダル情報に基づく指示語を含んだ言語指示の外部照応解析2023

    • 著者名/発表者名
      大山瑛,長谷川翔一,中川光,谷口彰,萩原良信,谷口忠大
    • 学会等名
      言語処理学会第29回年次大会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] ROS2とPythonを使ったAIロボット入門教材 ―趣旨・音声認識/合成・プランニング―2022

    • 著者名/発表者名
      萩原良信,升谷保博,出村公成,タンジェフリートゥチュアン,伊藤昌樹
    • 学会等名
      第40回 日本ロボット学会 学術講演会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 語彙の合成性を有するマルチモーダル記号創発2022

    • 著者名/発表者名
      古川和磨,萩原良信,谷口彰,谷口忠大
    • 学会等名
      第36回人工知能学会全国大会(JSAI2022)
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 変分オートエンコーダを活用した実画像からの記号創発2022

    • 著者名/発表者名
      吉田悠人,萩原良信,谷口彰,谷口忠大
    • 学会等名
      第36回人工知能学会全国大会(JSAI2022)
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 確率論理と場所概念を結合したモデルによる場所の学習コストの削減2022

    • 著者名/発表者名
      長谷川翔一,萩原良信,谷口彰,エフハフィロトフィ,谷口忠大
    • 学会等名
      第36回人工知能学会全国大会(JSAI2022)
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] ROS2とPythonを使ったAIロボット入門教材の開発2022

    • 著者名/発表者名
      出村公成, 萩原良信, 升谷保博, タン ジェフリー トゥ チュアン
    • 学会等名
      ロボティクス・メカトロニクス講演会2022
    • 関連する報告書
      2022 実施状況報告書
  • [図書] ROS2とPythonで作って学ぶAIロボット入門2022

    • 著者名/発表者名
      出村公成、萩原良信、升谷保博、タン ジェフリー トゥ チュアン
    • 総ページ数
      320
    • 出版者
      講談社
    • ISBN
      4065289564
    • 関連する報告書
      2022 実施状況報告書

URL: 

公開日: 2022-04-19   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi