• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2020 Fiscal Year Annual Research Report

深層畳み込みニューラルネットと有用画像処理における共有演算能力の相互変換手法

Research Project

Project/Area Number 18H03213
Research InstitutionHokkaido University

Principal Investigator

池辺 将之  北海道大学, 量子集積エレクトロニクス研究センター, 教授 (20374613)

Co-Investigator(Kenkyū-buntansha) 高前田 伸也  東京大学, 大学院情報理工学系研究科, 准教授 (60738897)
Project Period (FY) 2018-04-01 – 2021-03-31
Keywords深層畳み込みニューラルネットワー / 有用画像処理 / 局所適応型輝度補正技術 / FPGA実装
Outline of Annual Research Achievements

DCNN(カスコード型U-netを使用)において、特に雑音除去(ポアソンノイズ)ではタイリングによる画像分割が有効に働くことがわかった。また、層構造においても5層以上においての改善効果は持たない。タイリングにおいては、11x11での画像ブロックとOverlap3画素においてもPSNR値を32dB保つことが明らかになった。このことから、Full-HD以上画像の処理においてHWを最小化して深層学習ベースの雑音除去が可能となる。また、性能の向上について、ネットのカスケード構造が有効であることがわかった。このとき、第1ネットは雑音を再構成する。そのため、第2ネットは再構成された雑音を学習して、雑音がない状態の画像に近づける。このときPSNR値に変化は見られなかったが、特にグラデーション領域の滑らかさが際立った画像が得られることもわかった。本手法をエッジデバイスOKI AE2100 AI Edge computerに実装し、効果を確認した。

また、本研究で研究沿進めてきた局所輝度補正手法において、画像を一つの輝度変換空間でローカル・グローバル領域の演算を行うためには高周波領域に着目すれば良いことがわかった。また、低周波領域は、高周波の抽出に対して消された成分を復元する問題に帰着でき、それは輝度変換空間を変形することでなされることがわかった。このことから、本処理のパラメータを空間変形を行う制御点として定義できて、低解像度化した画像に対するDCNNを、空間物体の識別と本手法の輝度補正関数におけるローカル関数用の空間制御とグローバル制御パラメータを操作することが適当との知見を得ることができた。

Research Progress Status

令和2年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和2年度が最終年度であるため、記入しない。

  • Research Products

    (11 results)

All 2021 2020

All Journal Article (6 results) (of which Peer Reviewed: 6 results,  Open Access: 2 results) Presentation (5 results) (of which Int'l Joint Research: 2 results,  Invited: 4 results)

  • [Journal Article] Real-time tone mapping: a survey and cross-implementation hardware benchmark2021

    • Author(s)
      Yafei Ou, Prasoon Ambalathankandy, Shinya Takamaeda-Yamazaki, Masato Motomura, Tetsuya Asai, Masayuki Ikebe
    • Journal Title

      IEEE Transactions on Circuits and Systems for Video Technology

      Volume: Early Access Pages: 1-21

    • DOI

      10.1109/TCSVT.2021.3060143

    • Peer Reviewed / Open Access
  • [Journal Article] Quantification of Joint Space Width Difference on Radiography Via Phase-Only Correlation (POC) Analysis: a Phantom Study Comparing with Various Tomographical Modalities Using Conventional Margin-Contouring2021

    • Author(s)
      Aimi Taguchi, Shun Shishido, Yafei Ou, Masayuki Ikebe, Tianyu Zeng, Wanxuan Fang, Koichi Murakami, Toshikazu Ueda, Nobutoshi Yasojima, Keitaro Sato, Kenichi Tamura, Kenneth Sutherland, Nozomi Oki, Ko Chiba, Kazuyuki Minowa, Masataka Uetani & Tamotsu Kamishima
    • Journal Title

      Journal of Digital Imaging

      Volume: 34 Pages: 96-104

    • DOI

      10.1007/s10278-020-00406-1

    • Peer Reviewed
  • [Journal Article] Selective Fine-Tuning on a Classifier Ensemble: Realizing Adaptive Neural Networks With a Diversified Multi-Exit Architecture2021

    • Author(s)
      Kazutoshi Hirose, Shinya Takamaeda-Yamazaki, Jaehoon Yu, Masato Motomura
    • Journal Title

      IEEE Access

      Volume: 9 Pages: 6179-6187

    • DOI

      10.1109/ACCESS.2020.3047799

    • Peer Reviewed
  • [Journal Article] STATICA: A 512-Spin 0.25M-Weight Annealing Processor with an All-Spin-Updates-at-Once Architecture for Combinatorial Optimization with Complete Spin-Spin Interactions,2021

    • Author(s)
      Kasho Yamamoto, Kazushi Kawamura, Kota Ando, Normann Mertig, Takashi Takemto, Masanao Yamaoka, Hiroshi Teramoto, Akira Sakai, Shinya Takamaeda-Yamazaki, and Masato Motomura
    • Journal Title

      IEEE Journal of Solid-State Circuits

      Volume: 56 Pages: 165-178

    • DOI

      10.1109/JSSC.2020.3027702

    • Peer Reviewed
  • [Journal Article] An Adaptive Global and Local Tone Mapping Algorithm Implemented on FPGA2020

    • Author(s)
      Prasoon Ambalathankandy, Masayuki Ikebe, Takashi Yoshida, Takeshi Shimada, Shinya Takamaeda-Yamazaki, Masato Motomura, and Tetsuya Asai
    • Journal Title

      IEEE Transactions on Circuits and Systems for Video Technology

      Volume: 30 Pages: 3015-3028

    • DOI

      10.1109/TCSVT.2019.2931510

    • Peer Reviewed
  • [Journal Article] A Hardware-efficient Weight Sampling Circuit for Bayesian Neural Networks2020

    • Author(s)
      Yuki Hirayama, Tetsuya Asai, Masato Motomura, and Shinya Takamaeda-Yamazaki
    • Journal Title

      International Journal of Networking and Computing

      Volume: 10 Pages: 84-93

    • DOI

      10.15803/ijnc.10.2_84

    • Peer Reviewed / Open Access
  • [Presentation] A 32x32-Pixel Global Shutter CMOS THz Imager with VCO-Based ADC2021

    • Author(s)
      Yuri Kanazawa
    • Organizer
      26th Asia and South Pacific Design Automation ConferenceASP-DAC 2021
    • Int'l Joint Research / Invited
  • [Presentation] A CMOS THz Image Sensor with Process Variation Tolerance Technique2020

    • Author(s)
      Masayuki Ikebe
    • Organizer
      IEEE International Symposium on Radio-Frequency Integration Technology
    • Int'l Joint Research / Invited
  • [Presentation] 画素並列ADCを持つグローバルシャッタ型テラヘルツ光CMOSイメージセンサとその補正機構2020

    • Author(s)
      池辺将之
    • Organizer
      テラヘルツシステム応用推進協議会
    • Invited
  • [Presentation] イメージセンサと局所適応型画像処理の開発とその展望2020

    • Author(s)
      池辺将之
    • Organizer
      映像情報メディア学会2020年次大会
    • Invited
  • [Presentation] センシング後の画像処理に向けた高速・適応型輝度チャネル表現2020

    • Author(s)
      池辺将之
    • Organizer
      情報センシング研究会(IST)新規イメージセンサ・光源・信号処理に基づくイメージセンシング

URL: 

Published: 2021-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi