AI and HI cooperative operation support system for multiple drones with remote presence using omnidirectional spherical camera

• Project/Area Number: 25K15221
• Research Category: Grant-in-Aid for Scientific Research (C)
• Allocation Type: Multi-year Fund
• Section: 一般
• Review Section: Basic Section 61020:Human interface and interaction-related
• Research Institution: Yamato University
• Principal Investigator: 前田 陽一郎 大和大学, 情報学部, 教授 (40278586)
• Project Period (FY): 2025-04-01 – 2028-03-31
• Project Status: Granted (Fiscal Year 2025)
• Budget Amount: ¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000); Fiscal Year 2027: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000); Fiscal Year 2026: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000); Fiscal Year 2025: ¥2,990,000 (Direct Cost: ¥2,300,000、Indirect Cost: ¥690,000)
• Keywords: ドローン / 知的操作支援 / 遠隔臨場感 / 全天球映像

Outline of Research at the Start

本研究では、VRゴーグルを用いた全天球カメラ映像による体感型遠隔臨場感を有する複数ドローンの集団知的操作支援システムを構築する。まず、全天球カメラを搭載した１台のドローンを用いて熟練者の操作特性を深層学習(CNN)により学習し、ファジィニューラルネットワーク(FNN)による自律飛行を実現するための操作ルールの知識獲得（AI操作）を行う。さらに、複数台のマルチドローンにシステムを拡張し、効率的な自律集団飛行システムを構築するとともに、事前に獲得された熟練者のAI操作で人の遠隔作業（HI操作）をサポートする人工知能(AI)と人間知能(HI)の協調による知的操作支援システムの実現を目指す。