研究課題/領域番号 |
22K01014
|
研究機関 | 琉球大学 |
研究代表者 |
赤嶺 有平 琉球大学, 工学部, 准教授 (00433095)
|
研究分担者 |
根路銘 もえ子 沖縄国際大学, 経済学部, 准教授 (60369197)
|
研究期間 (年度) |
2022-04-01 – 2027-03-31
|
キーワード | 博物館 / ディジタルアーカイブ / 自律走行ロボット |
研究実績の概要 |
当該年度は,博物館内を自動撮影するために必要な環境マップの作成を行う,小型軽量自律走行型撮影ロボットの開発を行った.本研究の目的の一つは,博物館等において展示物を中心に館内をくまなく撮影し,3Dアーカイブを自動生成することである.また,実運用時のコストを可能な限り削減することが求められるため,流通性が高く低価格の汎用部品を組み合わせた設計を行っている. まず,シミュレーション環境を含むフレームワーク開発を行った.複数ハードウエア間において低遅延なデータ交換が可能であり,Apple社のデバイスをはじめ様々なハードウエアやプログラミング言語に対応している.これにより単体モジュールとしてはほとんど市場に流通していない2D LiDARセンサをiPad経由で利用可能となり,低コストに高性能な自律走行ロボットの構築が可能となった.また,Python, C++, C#の各言語に対応しており,開発が容易なPython,必要に応じてC++, C#などをモジュール単位で組み合わせることが可能である.Pythonは,深層学習をはじめとする機械学習のライブラリが豊富であり画像認識等による制御を容易にコーディングできる. 同フレームワーク,LEGO,Raspbery Pi等の市販の製品を組み合わせることでスキャンロボットの試作を行った.室内において走行実験を行ったところ,障害物を適切に避けながら走行可能範囲内を自律的に周回し,室内の3次元点群モデルを取得可能であることが確認できた.計測・構築された3次元点群モデルは,即時に可視化され,館内のレイアウトを得ることできる.同ロボットの主な目的は,撮影ロボットの自己位置推定精度を向上するための3次元点群と局所特徴量群の生成を行うことである.得られたレイアウトに従って走行計画を入力することで撮影ロボットを安全かつ適切な位置に誘導することが期待できる.
|
現在までの達成度 (区分) |
現在までの達成度 (区分)
2: おおむね順調に進展している
理由
ロボット開発に必要なライブラリの構築を行い,実用可能性の検証ができている.また,自律制御ロボットの実機の試作を行い,実環境において問題なく動作することが確認できている.一方で,撮影画像からデータベースを自動構築するための手法についての研究も進んでいるため,「概ね順調」とした.
|
今後の研究の推進方策 |
スキャンロボットから得られる3次元点群および特徴点に基づき,ユーザの指示した経路にしたがって,安全に自律走行を行いながら撮影を行うロボットを構築したライブラリを用いて開発する.撮影ロボットは,電動ズームやピント制御等を行うことで,非常に精密な画像が取得可能となることを目指す.これは人が行う場合に非常にコストがかかる作業であり,カメラに関する知識を要する.また,撮影ロボットにより得られた画像群は,深層学習等の手法を用いて,展示物と説明パネルの検出および結び付けを行う.これにより,館内の3次元モデルが得られるだけでなく,展示されている資料についての3次元モデルと関連するテキストによる説明が結びついたデータベースの自動生成を目指す. 両者の結び付けには,Vision Transformerをはじめとする深層学習モデルを用いることを検討している.物理的な位置関係だけでなく,説明文を深層学習モデルによって解釈する(正確には特徴を得る)ことで意味的な結び付けを行うことを試す予定である. 得られたデータベースは,ディジタルアーカイブとして公開できるだけでなく,AR,VRを活用した展示アプリケーションへの応用が期待できる.
|
次年度使用額が生じた理由 |
レゴ等のコンシューマ向け製品を流用することで経費を抑えることができたため次年度使用額が生じた. 次年度は,深層学習モデルを用いた機械学習による実験を行うため,計算環境(GPUなど)の構築,および博物館のDXに関する情報収集を行う予定である.
|