• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

深層学習と圧縮センシングを融合した革新的超低消費電力イメージングシステムの実現

研究課題

研究課題/領域番号 22K12101
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分61010:知覚情報処理関連
研究機関法政大学

研究代表者

周 金佳  法政大学, 理工学部, 准教授 (50723392)

研究分担者 谷口 一徹  大阪大学, 大学院情報科学研究科, 准教授 (40551453)
研究期間 (年度) 2022-04-01 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2024年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2023年度: 1,560千円 (直接経費: 1,200千円、間接経費: 360千円)
2022年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
キーワードImage sensing / Deep learning / Compressive sensing
研究開始時の研究の概要

This research proposes a new optical coding with AI based measurement coding and smart sparse recovery system that can greatly reduce the sensing power and compression power at the same time. It is the first time to design a sensing pattern that can efficiently compress the signal during sensing.

研究実績の概要

The following tasks have been completed. (1) On the encoder side, building upon the adaptive sensing technique developed last year, we further optimized it and applied an edge detection-based and region-of-interest detection based adaptive sensing framework to enhance the quality of the reconstructed videos. (2) On the decoder side, we proposed an adaptive stage-activated unfolding network to adaptively control the complexity of reconstruction. (3) We optimized the entire system at the system level to realize a computer vision-oriented compressive sensing system. (4) To reduce the power consumption of the whole system, we proposed a framework for partial pre-calculation-based image encoding and decoding.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

As planned, the adaptive sampling algorithms based on key information extraction achieved excellent results in reducing computational complexity and improving the quality of reconstructed images/videos. Furthermore, the system-level optimization also yielded positive outcomes. We will continue to improve the performance of the whole system.

今後の研究の推進方策

This project is divided into three main tasks, each building upon the progress made in the previous stages. The first task of developing measurement coding system at the encoder side has already been successfully completed. In the second task, we focused on extracting moving objects, edge information and region-of-interest as key information during the FY2022 and FY2023. Our plan in FY2024 is to refine and enhance the key information extraction algorithms, incorporating new techniques to effectively selecting the sampling ratio while maintaining video quality. Additionally, we aim to optimize the entire system for reducing the power consumption.

報告書

(2件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 研究成果

    (9件)

すべて 2024 2023 その他

すべて 国際共同研究 (2件) 雑誌論文 (3件) (うち国際共著 1件、 査読あり 3件、 オープンアクセス 1件) 学会発表 (4件) (うち国際学会 4件)

  • [国際共同研究] Fudan University(中国)

    • 関連する報告書
      2023 実施状況報告書
  • [国際共同研究] Fudan University(中国)

    • 関連する報告書
      2022 実施状況報告書
  • [雑誌論文] Compressive Sensing Based Image Codec With Partial Pre-Calculation2024

    • 著者名/発表者名
      Xu Jiayao、Yang Jian、Kimishima Fuma、Taniguchi Ittetsu、Zhou Jinjia
    • 雑誌名

      IEEE Transactions on Multimedia

      巻: 26 ページ: 4871-4883

    • DOI

      10.1109/tmm.2023.3327534

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり
  • [雑誌論文] aVCSR: Adaptive Video Compressive Sensing Using Region-of-Interest Detection in the Compressed Domain2024

    • 著者名/発表者名
      Yang Jian、Wang Haixin、Taniguchi Ittetsu、Fan Yibo、Zhou Jinjia
    • 雑誌名

      IEEE MultiMedia

      巻: 31 号: 1 ページ: 19-32

    • DOI

      10.1109/mmul.2023.3342062

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Compressive Sensing in Image/Video Compression: Sampling, Coding, Reconstruction, and Codec Optimization2024

    • 著者名/発表者名
      Zhou Jinjia、Yang Jian
    • 雑誌名

      Information

      巻: 15 号: 2 ページ: 75-75

    • DOI

      10.3390/info15020075

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / オープンアクセス
  • [学会発表] Block based Adaptive Compressive Sensing with Sampling Rate Control2023

    • 著者名/発表者名
      Kosuke Iwama, Ryugo Morita, Jinjia Zhou
    • 学会等名
      ACM Multimedia Asia 2023
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] Adaptive Sampling for Computer Vision-Oriented Compressive Sensing2023

    • 著者名/発表者名
      Luyang Liu, Hiroki Nishikawa, Jinjia Zhou, Ittetsu Taniguchi, Takao Onoye
    • 学会等名
      ACM Multimedia Asia 2023
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] VCSL: Video Compressive Sensing with Low-complexity ROI Detection in Compressed Domain2023

    • 著者名/発表者名
      Jian Yang, Haixin Wang, Yibo Fan, and Jinjia Zhou
    • 学会等名
      2023 Data Compression Conference (DCC)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Zigzag Ordered Walsh Matrix for Compressed Sensing Image Sensor2023

    • 著者名/発表者名
      Jinyao Zhou, Jiayao Xu, Jirayu Peetakul, Jinjia Zhou
    • 学会等名
      2023 Data Compression Conference (DCC)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会

URL: 

公開日: 2022-04-19   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi