• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Remote and Autonomous Integrated Service Robot System Based on Intuitive Human Sensation and Foundational Model

Research Project

Project/Area Number 23K20003
Research Category

Grant-in-Aid for Research Activity Start-up

Allocation TypeMulti-year Fund
Review Section 1002:Human informatics, applied informatics and related fields
Research InstitutionOsaka University

Principal Investigator

小林 聖人  大阪大学, サイバーメディアセンター, 助教 (10979868)

Project Period (FY) 2023-08-31 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥2,860,000 (Direct Cost: ¥2,200,000、Indirect Cost: ¥660,000)
Fiscal Year 2024: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2023: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywordsロボティクス / 機械学習 / モーションコントロール / バイラテラル制御 / 遠隔制御 / 基盤モデル
Outline of Research at the Start

本研究では直感的な人間の感覚と大規模な基盤モデルに基づく、遠隔・自律融合型サービスロボットシステムを実現する。そのために人間の視覚、触覚等のマルチモーダルな情報、これらを統合する基盤モデルに着目し、研究を実施する。本研究は人間の直感的な感覚に基づく遠隔制御と基盤モデルを活用することで、サービスロボットシステムの自律化を導くものであり、安全安心な社会基盤の礎となる。

Outline of Annual Research Achievements

本研究では直感的な人間の感覚と大規模な基盤モデルに基づく、遠隔・自律融合型サービスロボットシステムの実現を目指している。
そこで本年度は主に(1)視覚・触覚等のマルチモーダルな情報に基づく直感的な遠隔操作技術の設計・実装、(2)マルチモーダルな基盤モデルに基づく遠隔・自律融合制御、(3)自律動作技術の開発とその評価を行った。
(1)視覚・触覚等のマルチモーダルな情報に基づく直感的な遠隔操作技術を開発するにあたり、4チャンネル型バイラテラル制御を活用することで、力センサレスで力触覚を取得可能なシステムを開発した。
(2)マルチモーダルな基盤モデルに基づく遠隔・自律融合制御では視覚・力触覚等のマルチモーダルな情報と行動モデル学習のAction Chunking with Transformerを活用することで、視覚や力触覚を伴う多様な入出力を扱うことが可能な行動モデルを学習可能となった。
(3)自律動作技術の開発ではバイラテラル制御に基づく模倣学習を活用し、実現している。今後は多様なタスクやロボットを活用して開発したシステムを評価していく予定である。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

視覚・触覚等のマルチモーダルな情報に基づく直感的な遠隔操作技術の設計・実装、マルチモーダルな基盤モデルに基づく遠隔・自律融合制御、自律動作技術の開発は大きく前進した。しかしながら単純なタスクのみを扱っていたため、今後は多様なタスクやロボットを活用して開発したシステムを評価していく予定である。

Strategy for Future Research Activity

基盤となるロボットシステムはおおよそ完成したため、多様なタスクやロボットを活用して開発したシステムを評価していく予定である。特に現在は物拾う等の単純なタスクを実施しているため、より日常生活に近いタスクの実現を目指していく予定である。

Report

(1 results)
  • 2023 Research-status Report
  • Research Products

    (2 results)

All 2023

All Presentation (2 results)

  • [Presentation] バイラテラル制御に基づく模倣学習におけるロボットアームの動作生成手法に関する研究2023

    • Author(s)
      小林 聖人, Thanpimon Buamanee, Iglesius Eduardo, 西 滉平 , 浦西 友樹, 竹村 治雄
    • Organizer
      電気学会 産業計測制御研究会 センサ情報処理とセンサデータの制御システムへの応用
    • Related Report
      2023 Research-status Report
  • [Presentation] 水中におけるバイラテラル制御に基づく遠隔操作ロボットシステムの基礎検討2023

    • Author(s)
      西 滉平, 小林聖人, 元井直樹, 浦西友樹, 竹村治雄
    • Organizer
      電気学会 産業計測制御研究会 センサ情報処理とセンサデータの制御システムへの応用
    • Related Report
      2023 Research-status Report

URL: 

Published: 2023-09-11   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi