• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Photo Developing based on 5D Probabilistic Light Field

Research Project

Project/Area Number 18K19813
Research Category

Grant-in-Aid for Challenging Research (Exploratory)

Allocation TypeMulti-year Fund
Review Section Medium-sized Section 61:Human informatics and related fields
Research InstitutionNagoya Institute of Technology

Principal Investigator

Fukushima Norishige  名古屋工業大学, 工学(系)研究科(研究院), 准教授 (80550508)

Project Period (FY) 2018-06-29 – 2021-03-31
Project Status Completed (Fiscal Year 2020)
Budget Amount *help
¥6,370,000 (Direct Cost: ¥4,900,000、Indirect Cost: ¥1,470,000)
Fiscal Year 2020: ¥1,690,000 (Direct Cost: ¥1,300,000、Indirect Cost: ¥390,000)
Fiscal Year 2019: ¥2,080,000 (Direct Cost: ¥1,600,000、Indirect Cost: ¥480,000)
Fiscal Year 2018: ¥2,600,000 (Direct Cost: ¥2,000,000、Indirect Cost: ¥600,000)
Keywords画像処理 / エッジ保存平滑化フィルタ / バイラテラルフィルタ / ガイデットフィルタ / SSIM / Bayer画像処理 / 乱択アルゴリズム / ジョイントバイラテラルアップサンプル / コンピュテーショナルフォトグラフィ / ガウシアンフィルタ / ノンローカルミーンフィルタ / Bayer画像 / 定数時間ガウシアンフィルタ / 局所LUT / オプティカルフロー / Halide / 光線空間 / 自由視点映像 / リフォーカシング / ハイダイナミックレンジイメージング
Outline of Final Research Achievements

In this research, we aim to establish a capturing method that achieves higher image quality, higher realism, and higher functionality by changing the paradigm of shooting from the conventional shooting method of "setting the camera, capturing the subject in the field of view, and then releasing the shutter" to "shooting video while changing the camera settings and later developing the desired image by computational processing. The aim of this research is to establish a method of capturing images that achieves higher image quality, higher realism, and higher functionality. As a result of our research, we have achieved a high-performance development process from a set of consecutive images.

Academic Significance and Societal Importance of the Research Achievements

本研究では,大別して4つの研究成果を上げた.1つめは,近年の画像処理の基幹的な役割を果たすエッジ保存平滑化フィルタの代表的なフィルタであるバイラテラルフィルタの高速化を実現した.2つ目は,画像処理結果をサブサンプリングし,それをエッジ保存平滑化フィルタを使って高精度にアップサンプルすることで高速かつ高性能な任意の画像処理の高速化を実現した.ほかにもランダムサブサンプルによっても高速化した.3つ目は,代表的な画質評価指標であるSSIMやMS-SSIMの計算を高速化した.最後に,連射したBayer画像群から直接的に高品質の画像を現像する方法を実現した.

Report

(4 results)
  • 2020 Annual Research Report   Final Research Report ( PDF )
  • 2019 Research-status Report
  • 2018 Research-status Report
  • Research Products

    (67 results)

All 2021 2020 2019 2018 Other

All Journal Article (1 results) (of which Open Access: 1 results) Presentation (63 results) (of which Int'l Joint Research: 18 results,  Invited: 1 results) Book (1 results) Remarks (2 results)

  • [Journal Article] Effective Implementation of Edge-Preserving Filtering on CPU Microarchitectures2018

    • Author(s)
      Maeda Yoshihiro、Fukushima Norishige、Matsuo Hiroshi
    • Journal Title

      Applied Sciences

      Volume: 8 Issue: 10 Pages: 1985-1985

    • DOI

      10.3390/app8101985

    • Related Report
      2018 Research-status Report
    • Open Access
  • [Presentation] 画像処理の高性能計算2021

    • Author(s)
      福嶋慶繁
    • Organizer
      電子情報通信学会画像工学研究会(IE)
    • Related Report
      2020 Annual Research Report
    • Invited
  • [Presentation] GPUにおけるバイラテラルフィルタのガウス分布重み計算の近似高速化2021

    • Author(s)
      小島史也,福嶋慶繁
    • Organizer
      電子情報通信学会東海支部卒業研究発表会
    • Related Report
      2020 Annual Research Report
  • [Presentation] バイラテラルフィルタの数値計算精度2021

    • Author(s)
      近藤拓海,福嶋慶繁
    • Organizer
      電子情報通信学会東海支部卒業研究発表会
    • Related Report
      2020 Annual Research Report
  • [Presentation] コンプレッシブバイラテラルフィルタの係数計算の高速化2021

    • Author(s)
      石川加寿也,福嶋慶繁
    • Organizer
      電子情報通信学会東海支部卒業研究発表会
    • Related Report
      2020 Annual Research Report
  • [Presentation] 固有値分解による高次元ガウシアンフィルタの高速化2021

    • Author(s)
      大石創,福嶋慶繁
    • Organizer
      電子情報通信学会東海支部卒業研究発表会
    • Related Report
      2020 Annual Research Report
  • [Presentation] Vectorized Implementation of K-means2021

    • Author(s)
      T. Otsuka and N. Fukushima
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT)
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Clustering-Based Acceleration for High-Dimensional Gaussian Filtering2021

    • Author(s)
      S. Oishi and N. Fukushima
    • Organizer
      International Conference on Signal Processing and Multimedia Applications (SIGMAP)
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Halideによる効率的な再帰型ガウシアンフィルタの記述2020

    • Author(s)
      高木博康, 福嶋慶繁
    • Organizer
      情報学ワークショップ Workshop on Informatics 2020 (WiNF 2020)
    • Related Report
      2020 Annual Research Report
  • [Presentation] 可分化によるバイラテラルフィルタの高速化2020

    • Author(s)
      間瀬和哉,福嶋慶繁
    • Organizer
      情報学ワークショップ Workshop on Informatics 2020 (WiNF 2020)
    • Related Report
      2020 Annual Research Report
  • [Presentation] 定数時間GFによるSSIMの高速計算2020

    • Author(s)
      李思語,福嶋慶繁,佐々木大寛,杉本憲治郎,鎌田清一郎
    • Organizer
      情報学ワークショップ Workshop on Informatics 2020 (WiNF 2020)
    • Related Report
      2020 Annual Research Report
  • [Presentation] 定数時間アルゴリズムによるローカルラプラシアンフィルタの高速化2020

    • Author(s)
      角谷勇仁,大塚友貴,前田慶博,福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2020 Annual Research Report
  • [Presentation] バイラテラルフィルタの可分化による高速化2020

    • Author(s)
      間瀬和哉,福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2020 Annual Research Report
  • [Presentation] フーリエ級数展開によるローカルラプラシアンフィルタの高速化2020

    • Author(s)
      角谷勇仁,大塚友貴,前田慶博,福嶋慶繁
    • Organizer
      電気電子情報関係学会東海支部連合大会
    • Related Report
      2020 Annual Research Report
  • [Presentation] 定数時間GFを用いたSSIM計算の高速化2020

    • Author(s)
      李思語,福嶋慶繁,佐々木大寛,杉本憲治郎,鎌田清一郎
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2020 Annual Research Report
  • [Presentation] Halideを用いた再帰型ガウシアンフィルタの効率的な記述2020

    • Author(s)
      高木博康, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2020 Annual Research Report
  • [Presentation] Optimization of Sliding-DCT Based Gaussian Filtering for Hardware Accelerator2020

    • Author(s)
      T. Otsuka, N. Fukushima, Y. Maeda, K. Sugimoto and S. Kamata
    • Organizer
      IEEE International Conference on Visual Communications and Image Processing (VCIP)
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] An Efficient Description with Halide for IIR Gaussian Filter2020

    • Author(s)
      H. Takagi and N. Fukushima
    • Organizer
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Comparison of Image Features Descriptions for Diagnosis of Leaf Diseases2020

    • Author(s)
      M. Waqas and N. Fukushima
    • Organizer
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Halide Implementation of Weighted Median Filter2020

    • Author(s)
      A. Ishikawa, N. Fukushima, and H. Tajima
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT)
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Multi-frame interpolation of Bayer images using optical flow2020

    • Author(s)
      T. Sato and N. Fukushima
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT)
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Halide and OpenMP for Generating High-Performance Recursive Filters2020

    • Author(s)
      Y. Tsuji and N. Fukushima
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT)
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Fast Local LUT Upsampling2020

    • Author(s)
      H. Tajima, T. Tsubokawa, Y. Maeda, and N. Fukushima
    • Organizer
      International Conference on Computer Vision Theory and Applications (VISAPP)
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Constant-Time Gaussian Filtering for Acceleration of Structure Similarity2020

    • Author(s)
      T. Sasaki, N. Fukushima, Y. Maeda, K. Sugimoto, and S. Kamata
    • Organizer
      International Conference on Image Processing and Robot (ICIPRoB)
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Extending Compressive Bilateral Filtering For Arbitrary Range Kernel2020

    • Author(s)
      Y. Sumiya, N. Fukushima, K. Sugimoto, and S. Kamata
    • Organizer
      International Conference on Image Processing (ICIP)
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Image Tiling for Clustering to Improve Stability of Constant-Time Color Bilateral Filtering2020

    • Author(s)
      T. Miyamura, N. Fukushima, W. Muhammad, K. Sugimoto, and S. Kamata,
    • Organizer
      International Conference on Image Processing (ICIP)
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] バイラテラルフィルタの数値計算精度2019

    • Author(s)
      福嶋慶繁, 前田慶博
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2019 Research-status Report
  • [Presentation] Halide を用いたステレオマッチングの実装2019

    • Author(s)
      石川阿香里, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2019 Research-status Report
  • [Presentation] ローカルLUTアップサンプリング2019

    • Author(s)
      田島寛士, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2019 Research-status Report
  • [Presentation] 乱択フィルタにおけるサンプリングカーネルの最適化2019

    • Author(s)
      坪川哲平, 前田慶博, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2019 Research-status Report
  • [Presentation] スライディング DCT による定数時間ガウシアンフィルタの安定性2019

    • Author(s)
      大塚友貴, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2019 Research-status Report
  • [Presentation] オプティカルフローを用いたベイヤー画像のマルチフレーム補間2019

    • Author(s)
      佐藤利樹, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2019 Research-status Report
  • [Presentation] 再帰フィルタとタイリングのHalide による記述2019

    • Author(s)
      辻悠太, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2019 Research-status Report
  • [Presentation] 定数時間カラーバイラテラルフィルタの精度向上2019

    • Author(s)
      宮村挙寿, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2019 Research-status Report
  • [Presentation] スライディングDCTによる定数時間ガウシアンフィルタの高精度計算2019

    • Author(s)
      大塚友貴, 福嶋慶繁, 杉本憲治郎, 鎌田清一郎
    • Organizer
      電子情報通信学会画像工学研究会(IE)
    • Related Report
      2019 Research-status Report
  • [Presentation] SIFT記述子に基づく葉の病気部分類2019

    • Author(s)
      Muhammad Waqas, 福嶋慶繁
    • Organizer
      電子情報通信学会通信方式研究会(CS)
    • Related Report
      2019 Research-status Report
  • [Presentation] Accelerating Redundant DCT Filtering for Deblurring and Denoising2019

    • Author(s)
      N. Fukushima, Y. Kawasaki, and Y. Maeda
    • Organizer
      IEEE International Conference on Image Processing (ICIP)
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research
  • [Presentation] 200 FPS Constant-time Bilateral Filter Using SVD and Tiling Strategy2019

    • Author(s)
      K. Sugimoto, N. Fukushima, and S. Kamata
    • Organizer
      IEEE International Conference on Image Processing (ICIP)
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research
  • [Presentation] Vector Addressing for Non-Sequential Sampling in FIR Image Filtering2019

    • Author(s)
      N. Fukushima, T. Tsubokawa, and Y. Maeda
    • Organizer
      IEEE International Conference on Image Processing (ICIP)
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research
  • [Presentation] Halide and GENESIS for Generating Domain-Specific Architecture of Guided Image Filtering2019

    • Author(s)
      A. Ishikawa, N. Fukushima, A. Maruoka, and T. Iizuka
    • Organizer
      IEEE International Symposium on Circuits and Systems (ISCAS)
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research
  • [Presentation] DCTを用いた定数時間ガウシアンフィルタの演算数削減2019

    • Author(s)
      大塚友貴,福嶋慶繁
    • Organizer
      画像センシングシンポジウム(SSII)
    • Related Report
      2018 Research-status Report
  • [Presentation] 冗長DCTによる高効率な周波数フィルタリング2019

    • Author(s)
      佐藤利樹,川崎雄基,福嶋慶繁
    • Organizer
      画像センシングシンポジウム(SSII)
    • Related Report
      2018 Research-status Report
  • [Presentation] 領域に応じたレンジカーネル最適化による定数時間バイラテラルフィルタ2019

    • Author(s)
      宮村挙寿,杉本憲治郎,福嶋慶繁,鎌田清一郎
    • Organizer
      電子情報通信学会画像工学研究会(IE)
    • Related Report
      2018 Research-status Report
  • [Presentation] DCTを用いた定数時間ガウシアンフィルタの演算数削減2019

    • Author(s)
      大塚友貴, 福嶋慶繁
    • Organizer
      電子情報通信学会東海支部 卒業研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] 定数時間バイラテラルフィルタの効率的な計算スケジューリング2019

    • Author(s)
      辻悠太, 福嶋慶繁
    • Organizer
      電子情報通信学会東海支部 卒業研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] オプティカルフローを用いた手振れ画像からのHDR画像生成2019

    • Author(s)
      佐藤利樹, 福嶋慶繁
    • Organizer
      電子情報通信学会東海支部 卒業研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] タイリングとレンジドメイン削減による定数時間バイラテラルフィルタの性能向上2019

    • Author(s)
      宮村挙寿, 福嶋慶繁
    • Organizer
      電子情報通信学会東海支部 卒業研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] Local LUT Upsampling for Acceleration of Edge-Preserving Filtering2019

    • Author(s)
      H. Tajima, T. Tsubokawa, Y. Maeda, and N. Fukushima
    • Organizer
      International Conference on Computer Vision Theory and Applications (VISAPP)
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research
  • [Presentation] Tiling Parallelization of Guided Image Filtering2018

    • Author(s)
      T. Tsubokawa, M. Nakamura, Y. Maeda, and N. Fukushima
    • Organizer
      International Workshop on Frontiers of Computer Vision (IW-FCV)
    • Related Report
      2018 Research-status Report
  • [Presentation] ローカルLUTによるエッジ保存平滑化フィルタの近似高速化2018

    • Author(s)
      田島寛士,坪川哲平,前田慶博,福嶋慶繁
    • Organizer
      電子情報通信学会 画像工学研究会(IE)
    • Related Report
      2018 Research-status Report
  • [Presentation] Vectorization of Kernel and ImageSubsampling in FIR Image Filtering2018

    • Author(s)
      T. Tsubokawa, Y. Maeda, and N. Fukushima
    • Organizer
      International Symposium on Computing and Networking (CANDAR)
    • Related Report
      2018 Research-status Report
  • [Presentation] ガイデットフィルタのHalideとGENESISコンパイラを用いた専用アーキテクチャ生成2018

    • Author(s)
      石川阿香里, 福嶋慶繁, 丸岡晃, 飯塚拓郎
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2018 Research-status Report
  • [Presentation] エッジ保持平滑化フィルタの非正規化数抑制による効率的な実装2018

    • Author(s)
      前田慶博,福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2018 Research-status Report
  • [Presentation] ローカルLUTを用いたエッジ保存平滑化フィルタの高速化2018

    • Author(s)
      田島寛士,坪川哲平,前田慶博,福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2018 Research-status Report
  • [Presentation] ポストスケーリング型DCTを用いた周波数フィルタリングへの冗長処理適用2018

    • Author(s)
      川﨑雄基, 前田慶博, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2018 Research-status Report
  • [Presentation] FIRフィルタにおける画素とカーネルのサブサンプリングによる高速化2018

    • Author(s)
      坪川哲平,前田慶博、福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2018 Research-status Report
  • [Presentation] 単精度浮動小数点における定時間バイラテルフィタの高効率化2018

    • Author(s)
      渡邉光一朗, 前田慶博, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2018 Research-status Report
  • [Presentation] PCAによる局所線形フィルタの高速化2018

    • Author(s)
      室岡芳樹, 前田慶博, 福嶋慶繁
    • Organizer
      画像符号化シンポジウム(PCSJ)/映像メディア処理シンポジウム(IMPS)
    • Related Report
      2018 Research-status Report
  • [Presentation] Efficient Computational Scheduling of Box and Gaussian FIR Filtering for CPU Microarchitecture2018

    • Author(s)
      N. Fukushima, Y. Maeda, Y. Kawasaki, M. Nakamura, T. Tsumura, K. Sugimoto, and S. Kamata
    • Organizer
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research
  • [Presentation] 定数時間バイラテラルフィルタの高効率な単精度浮動小数点実装2018

    • Author(s)
      渡邉光一朗, 前田慶博, 福嶋慶繁
    • Organizer
      信号処理シンポジウム
    • Related Report
      2018 Research-status Report
  • [Presentation] ポストスケーリング型DCTによる周波数フィルタの高速化2018

    • Author(s)
      川﨑雄基, 前田慶博, 福嶋慶繁
    • Organizer
      電子情報通信学会ソサイエティ大会
    • Related Report
      2018 Research-status Report
  • [Presentation] ポストスケーリング型DCTによる冗長周波数フィルタ2018

    • Author(s)
      川﨑雄基, 前田慶博, 福嶋慶繁
    • Organizer
      電気・電子・情報関係学会東海支部連合大会
    • Related Report
      2018 Research-status Report
  • [Presentation] 主成分分析によるガイデットフィルタの近似2018

    • Author(s)
      室岡芳樹, 前田慶博, 福嶋慶繁
    • Organizer
      電気・電子・情報関係学会東海支部連合大会
    • Related Report
      2018 Research-status Report
  • [Presentation] 主成分分析を用いたガイデットフィルタの高速化2018

    • Author(s)
      室岡芳樹, 前田慶博, 福嶋慶繁
    • Organizer
      電子情報通信学会ソサイエティ大会
    • Related Report
      2018 Research-status Report
  • [Book] 距離・画像センサの基礎と最先端2020

    • Author(s)
      伊東 敏夫 (著), 福嶋 慶繁 (著), 鈴木 真二 (著), 高瀬 竜一 (著), 植芝 俊夫 (著), 堂前 幸康 (著), 木寺 正平 (著), & 25 その他
    • Total Pages
      228
    • Publisher
      S&T出版
    • ISBN
      9784907002831
    • Related Report
      2020 Annual Research Report
  • [Remarks] OpenCP

    • URL

      https://github.com/norishigefukushima/OpenCP

    • Related Report
      2020 Annual Research Report
  • [Remarks]

    • URL

      https://github.com/norishigefukushima/OpenCP

    • Related Report
      2018 Research-status Report

URL: 

Published: 2018-07-25   Modified: 2022-01-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi