2022 Fiscal Year Research-status Report
Development of AI-based Multi-action Detection System for multiple patients using Day-Night Omnidirectional Cameras
| Project/Area Number |
21K18109
|
|---|
| Research Institution | Japan Atomic Energy Agency |
|---|
Principal Investigator |
今渕 貴志 国立研究開発法人日本原子力研究開発機構, 福島研究開発部門 福島研究開発拠点 廃炉環境国際共同研究センター, 任期付研究員 (90845471)
|
|---|
| Project Period (FY) |
2021-04-01 – 2024-03-31
|
| Keywords | Omnidirectional camera / Human pose estimation / Behavior analysis / Deep learning |
|---|
| Outline of Annual Research Achievements |
本研究では、医療現場において患者のアクシデントにつながる行動を自動的にモニタリングすることを目的として、赤外線全方位型カメラを採用して取得したパノラマ画像から複数人物の3次元関節情報を推定し、各関節の時系列の変動から特定の行動を推定するシステムの研究開発を行なっている。令和4年度は、前年度に引き続き、プロトタイプシステムの開発および行動推定手法の開発に取り組んだ。プロトタイプシステム全体の小型化のために、組込ボードおよび産業用カメラが一体となったGPU (Graphics Processing Unit) 搭載型エッジデバイスを用いて各手法の実装を試みた。ここで、単眼全方位カメラから複数人物の3次元関節位置推定を行う手法についての開発に取り組み、性能確認のために市販の3次元カメラセンサによる3次元関節位置計測結果との比較を行なった。行動推定手法においては、前年度に構築した学習済モデルによる推論モジュールを組込デバイス上に実装するとともに、オンラインで推論を行う仕組みについての開発を行なった。また、今後の行動推定手法の頑健性向上および高速化の観点から最新の深層学習モデルの調査を行なった。さらに、携帯端末との連携機能の実現に向けて、通信モジュール、結果可視化ソフトウェアについての開発に着手した。当該プロトタイプシステムを用いた性能評価実験では、複数人物を対象として複数行動データの計測を行い、学習を適用したネットワークに対する汎化性能について評価を行った。また、オンライン推論の動作検証を行なった。
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
令和4年度は、プロトタイプシステムの小型化および行動推論手法のオンライン処理について開発を完了して評価実験を行うことができたが、世界的な半導体不足の影響から開発ボードの納入が予想より遅れたことにより、当初計画していた研究開発に遅れが生じた。また、全体的な進捗の遅れから令和4年度の研究成果について年度内の外部発表に至ることができなかった。
|
| Strategy for Future Research Activity |
今後は、複数人被験者による評価実験の結果をまとめて外部発表を行うとともに、行動推論手法において暗所環境やレイアウトに違いによる頑健性の確認を行う。プロトタイプシステム開発については、携帯端末との連携機能について開発を進めることでプロトタイプシステムの完成を目指す。一連の機能の動作検証を通して、システム全体の評価を実施する予定である。
|
| Causes of Carryover |
当初計画していた物品購入および外部発表を実施することができなかったため予定より差額が生じた。次年度に当該物品購入および外部発表を実施するとともに、データ計測・収集実験を行うために、物品購入費、旅費および学会参加費として計上する。
|
