研究課題
基盤研究(B)
本研究課題では、Embodied AIが実世界で頑健に動作するための4D Sim-to-Real基盤の構築を目指す。これを実現するために、本研究では動的な3Dシーンを再構成できる4次元再構成手法と、申請者がこれまで取り組んできた3D視覚と言語の技術を融合することで、言語指示によって多様な4Dシーンの編集が可能な4Dシミュレーターを作成する。さらに、4Dシミュレーター内で学習したEmbodied AIを移動ロボットに実装し、実世界での言語指示ナビゲーション課題を通じて、4Dシミュレーションの有効性を検証する。