2022 Fiscal Year Annual Research Report
A New AI Method for Bridge Inspection and Diagnosis that Combines CNN with Highly Accurate Damage Detection and Expertises
| Project/Area Number |
21H01417
|
|---|
| Research Institution | The University of Tokyo |
|---|
Principal Investigator |
全 邦釘 東京大学, 大学院工学系研究科(工学部), 特任准教授 (60605955)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
宮本 崇 山梨大学, 大学院総合研究部, 准教授 (30637989)
浅本 晋吾 埼玉大学, 理工学研究科, 准教授 (50436333)
党 紀 埼玉大学, 理工学研究科, 准教授 (60623535)
|
|---|
| Project Period (FY) |
2021-04-01 – 2024-03-31
|
| Keywords | 橋梁点検診断 / 損傷検知 / CNN / AI / Deep learning / 維持管理 / Image captioning / VQA |
|---|
| Outline of Annual Research Achievements |
橋梁点検診断の効率化および高精度化のため，Deep Learning（DL）技術の一種である
Convolutional Neural Network (CNN)により橋梁撮影画像を解析し，損傷を自動で評価する手法の実現が期待されている．当該年度は，昨年度の取り組みを継続的，着実に進め，ドローン計測，分岐型CNN構築，Structure from Motion (SfM)，Image Captioning，専門知モデルに関する要素技術開発，そしてそれらの組み合わせ方法についての研究を進めることができた．
ドローン計測については対象橋梁での計測を完了した．また，そこから分岐型CNNを用いた解析や，SfMを組み合わせることで，3次元モデルに損傷をプロットする手法を確立することができた．この結果は，Structure and Infrastructure Engineeringや，Computer-aided Civil and Infrastructure Engineeringといった著名な国際誌に掲載された．なお昨年度は分岐型CNNにはAttention機構を導入することが有効であると見出していたが，それについても当該年度に実装して確認した．
また，Image Captioning手法を用いて，例えば「鋼桁の腐食があったが，これは近傍の排水管腐食による漏水が原因である」，といったような専門知との連携も可能とした．これについては現在Structure and Infrastructure Engineeringに投稿中である．またその過程で，Visual Question Answering (VQA)という手法を融合させることはさらに有意義だと見出しており，これについても研究を進め，成果を得ることができている．
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
ほぼすべての項目が計画通りに進んでおり，また必要に応じてVisual Question Answeringやアテンション機構などの手法の適用も柔軟・着実に進められており，目的達成度という観点でも順調に進展しているといえる．
|
| Strategy for Future Research Activity |
現状では，計画通りにすすめていけば当初目的は達成できると考えている．ただし，【研究実績の概要】で記載したVisual Question Answeringのように，新しい手法を柔軟に取り入れることが重要だと考えている．特に，近年ChatGPTのようなLarge Language Modelの進化が著しく，本研究は言語を扱うという観点で無関係ではないので，必要に応じて取り入れたいと考えている．
|
