研究課題
マルチモーダル空間センサから得られる3次元点群や動画像からのオブジェクト検知、およびそれらの位置関係や意味的な依存・因果関係を導出するため，今年度は主に人物の物体のセグメンテーションを行う技術やセグメントの移動を動画像および3次元点群において把握する技術を創出した．人物の歩行シーンや屋内行動などにおいて，センサの移動や撮影角なども考慮した手法を複数創出している．それらにおいては，センサ方向の検知と補正を行いながら実現する技術を検討した．より具体的には，計算機能とセンサを一体化した小型可搬型LiDARを用い，移動時における向きや角度も考慮した手法や，そのデバイスを応用した転倒検知手法，またウェアラブルカメラを用いた人物認識手法などを開発している．さらに，次年度のシーン理解に向けて，マルチモーダル生成ＡＩを用いた3次元点群のシーン理解を試行し，シーン分類性能における一定の成果を得ている．これらの成果は，モバイル・パーベイシブ計算で著名な国際論文誌であるElsevierのPervasive and Mobile Computingや，IEEE Pervasive Computing Magazine への掲載を実現するなどしている．
2: おおむね順調に進展している
当初の計画通りに進行している．今年度は3次元点群，動画像を共に対象とし，そのデータ内におけるオブジェクトの存在や移動，行動を理解する技術に焦点を当てるとともに，次年度に向けて生成ＡＩを利用したシーン把握の取組も開始している．それらの成果は著名国際論文誌や国際会議等で公表している．
次年度は検出オブジェクトの関係性に基づくシーン理解に挑戦する．これまでのオブジェクト検出の性能を向上させるとともに，より複雑なシーンにおける状況理解と要約技術について検討を始める．
すべて 2024 2023
すべて 雑誌論文 (7件) (うち査読あり 6件、 オープンアクセス 1件)
IEEE Pervasive Computing
巻: - ページ: 1～8
10.1109/MPRV.2024.3365989
Pervasive and Mobile Computing
巻: 100 ページ: 101914～101914
10.1016/j.pmcj.2024.101914
IEEE Open Journal of Intelligent Transportation Systems
巻: 4 ページ: 846～857
10.1109/OJITS.2023.3333263
Proceedings of the 20th EAI International Conference on Mobile and Ubiquitous Systems: Computing, Networking and Services
巻: - ページ: 1-14
Proceedings of the 26th IEEE International Conference on Intelligent Transportation Systems
巻: - ページ: 1-6
10.1109/ITSC57777.2023.10422569
マルチメディア，分散，協調とモバイルシンポジウム2023論文集
巻: - ページ: 16-24
Proceedings of the 19th International Conference on Intelligent Environments
巻: - ページ: 1-4
10.1109/IE57519.2023.10179092
