• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

自動運転に向けた車載カメラ映像の次世代高画質化技術の確立およびその実装

研究課題

研究課題/領域番号 22K12072
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分61010:知覚情報処理関連
研究機関名古屋工業大学

研究代表者

後藤 富朗  名古屋工業大学, 工学(系)研究科(研究院), 准教授 (20324478)

研究期間 (年度) 2022-04-01 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2024年度: 780千円 (直接経費: 600千円、間接経費: 180千円)
2023年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2022年度: 2,080千円 (直接経費: 1,600千円、間接経費: 480千円)
キーワードブラインド画像復元 / 車載カメラ映像 / ぼけ・ぶれ補正 / ぶれ・ぼけ復元
研究開始時の研究の概要

車載カメラ映像では、ぶれやぼけ、ノイズ混入などの画像劣化が生じる。本課題では、ブラインドデコンボリューションの高精度化・高速化アルゴリズムを提案し、車載カメラへ応用することで、車載カメラ撮影時のぼけ・ぶれ・ノイズ混入映像のリアルタイム補正を目指し、カメラ映像を用いた物体認識率や精度の向上を行うことで、次世代自動運転システムにおける安全性の向上に貢献できる技術の開発を行う。

研究実績の概要

令和5年度の研究実績の概要としては、以下の2点である。
(1) ブラインド画像復元処理の高速化:TV正則化手法およびShockフィルタのパラメータを最適化するアルゴリズムを開発し、復元画質性能を維持しつつ演算時間を従来法に比べ1/10程度の高速化を実現した。その際、動画像でのフレームの連続性を考慮し、PSF推定の際には前フレームの推定PSFを初期PSFとして用いることで、より高精度な推定を高速に行うことが可能となった。ただし、シーンの切り替わるような場面においては前フレームとの連続性がなくなることから、復元性能が低下することも確認した。また、シーンが切り替わる場面においては、数フレーム分、性能低下を引きずることも確認した。今後はシーンが切り替わる場面を推定し、その場合には前フレームのPSFを初期PSFとして用いないような処理を追加することで、復元性能の低下を抑える処理を追加する予定である。
(2) ワークステーション上でのリアルタイム処理の実現:ブラインド画像復元手法の種々のアルゴリズムの改良に取り組み、画質改善およびその計算時間を短縮し、ワークステーション上でのリアルタイム動作を実現した。実験により、VGA程度(640x480画素)の解像度の映像においては、リアルタイム処理が実現できることを確認した。ただし、処理時間と解像度は比例関係にあるため、VGAを超える解像度ではリアルタイム処理が行えず、更なる処理の高速化が必要であることも確認した。今後はより高精細な解像度にも対応するように更なる高速化を実現する予定である。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

当初計画においては令和五年度において①ブラインド画像復元処理の高速化、②ワークステーション上でのリアルタイム処理の実現を予定しており、概ね実現することができた。令和六年度においては、ワークステーション上でのリアルタイム処理の更なる高速化および処理の並列化を図り、複数のGPUデバイス上でのリアルタイム処理の実現を目指す。

今後の研究の推進方策

令和六年度は、以下の3点について重点的に研究を進める。
(1) 令和五年度の研究におけるシーン切り替わり時の復元性能低下の改善:令和五年度の研究において、シーンが切り替わるタイミングでの復元性能の低下が発覚したため、シーンの切り替わり検出を行い、シーンが切り替わるタイミングでは前フレームのPSFを参照しないような処理を加えることで、性能低下を抑制する処理を追加する。
(2) ワークステーション上でのリアルタイム処理の高速化:ブラインド画像復元処理アルゴリズムを見直し、更なる高速化を目指すとともに並列処理による処理速度の高速化を図ることで、処理の高速化を実現する。
(3) ワークステーション上での並列処理を複数枚のGPUカードで動作するようにアルゴリズムの改良およびGPU上での実装を行い、リアルタイム処理を目指す。

報告書

(2件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 研究成果

    (17件)

すべて 2023 2022

すべて 雑誌論文 (8件) (うち査読あり 8件) 学会発表 (9件) (うち国際学会 7件)

  • [雑誌論文] High Quality Digital Zoom using Learning Super-resolution2023

    • 著者名/発表者名
      Koki Nakayama and Tomio Goto
    • 雑誌名

      International Conference on Digital Medicine and Image Processing (DMIP2023)

      巻: - ページ: 18-24

    • DOI

      10.1145/3637684.3637688

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり
  • [雑誌論文] Deblurred Image Quality Improvement in Learning-Based Deblurring Datasets Utilizing Frame Interpolation2023

    • 著者名/発表者名
      Masaki Aoi and Tomio Goto
    • 雑誌名

      IEEE Global Conference on Consumer Electronics (GCCE 2023) Proceeding

      巻: - ページ: 722-723

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり
  • [雑誌論文] Improvement of Face Detection Accuracy for Mask Wearers2023

    • 著者名/発表者名
      Koshi Kito and Tomio Goto
    • 雑誌名

      IEEE Global Conference on Consumer Electronics (GCCE 2023) Proceeding

      巻: - ページ: 544-545

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり
  • [雑誌論文] Image Quality Improvement of Surveillance Camera Image by Learning Noise Removal Method Using Noise2Noise2023

    • 著者名/発表者名
      Tomio Goto and Akira Kuchida
    • 雑誌名

      Springer Lecture Notes in Computer Science

      巻: 14362 ページ: 409-419

    • DOI

      10.1007/978-3-031-47966-3_32

    • ISBN
      9783031479656, 9783031479663
    • 関連する報告書
      2023 実施状況報告書
    • 査読あり
  • [雑誌論文] Image Quality Improvement of Surveillance Camera Images by Learning-based Denoising Method Utilizing Noise2Noise2022

    • 著者名/発表者名
      Akira Kuchida, Tomio Goto
    • 雑誌名

      International Conference on Digital Medicine and Image (DMIP 2022) Processing

      ページ: 24-30

    • DOI

      10.1145/3576938.3576943

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] Performance Improvement of Deblurring Using Learning Methods2022

    • 著者名/発表者名
      Tatsuya Mizuno, Tomio Goto
    • 雑誌名

      IEEE Global Conference on Consumer Electronics (GCCE 2022) Proceeding

      ページ: 768-769

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] Improving Image Quality of Surveillance Camera Images by Noise Removal Using Learning Method2022

    • 著者名/発表者名
      Daiki Akiyama, Tomio Goto
    • 雑誌名

      IEEE Global Conference on Consumer Electronics (GCCE 2022) Proceeding

      ページ: 742-743

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] High Resoluion Image Generation Using Learning Super-Resolution for Low Resolution Images2022

    • 著者名/発表者名
      Koki Nakayama, Tomio Goto
    • 雑誌名

      IEEE International Conference on Computer Communication and the Internet (ICCCI2022) Proceeding

      ページ: 83-86

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [学会発表] High Quality Digital Zoom using Learning Super-resolution2023

    • 著者名/発表者名
      Koki Nakayama and Tomio Goto
    • 学会等名
      International Conference on Digital Medicine and Image Processing (DMIP2023)
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] Deblurred Image Quality Improvement in Learning-Based Deblurring Datasets Utilizing Frame Interpolation2023

    • 著者名/発表者名
      Masaki Aoi and Tomio Goto
    • 学会等名
      IEEE Global Conference on Consumer Electronics (GCCE 2023)
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] Improvement of Face Detection Accuracy for Mask Wearers2023

    • 著者名/発表者名
      Koshi Kito and Tomio Goto
    • 学会等名
      IEEE Global Conference on Consumer Electronics (GCCE 2023)
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] 学習法を用いたノイズ除去による監視カメラ映像の画質改善及びモデルの低軽量化に関する研究2023

    • 著者名/発表者名
      穐山 大輝, 後藤 富朗
    • 学会等名
      日本画像学会 研究討論会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 高周波成分に基づくぶれ画像処理学習モデルに関する研究2023

    • 著者名/発表者名
      水野 辰哉, 後藤 富朗
    • 学会等名
      日本画像学会 研究討論会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] Image Quality Improvement of Surveillance Camera Images by Learning-based Denoising Method Utilizing Noise2Noise2022

    • 著者名/発表者名
      Akira Kuchida, Tomio Goto
    • 学会等名
      International Conference on Digital Medicine and Image (DMIP 2022)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Performance Improvement of Deblurring Using Learning Methods2022

    • 著者名/発表者名
      Tatsuya Mizuno, Tomio Goto
    • 学会等名
      IEEE Global Conference on Consumer Electronics (GCCE 2022)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Improving Image Quality of Surveillance Camera Images by Noise Removal Using Learning Method2022

    • 著者名/発表者名
      Daiki Akiyama, Tomio Goto
    • 学会等名
      IEEE Global Conference on Consumer Electronics (GCCE 2022)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] High Resoluion Image Generation Using Learning Super-Resolution for Low Resolution Images2022

    • 著者名/発表者名
      Koki Nakayama, Tomio Goto
    • 学会等名
      IEEE International Conference on Computer Communication and the Internet (ICCCI2022)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会

URL: 

公開日: 2022-04-19   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi