• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2019 Fiscal Year Annual Research Report

Innovative performance improvement of holographic 3D image processing

Research Project

Project/Area Number 19H04132
Research InstitutionChiba University

Principal Investigator

下馬場 朋禄  千葉大学, 大学院工学研究院, 教授 (20360563)

Co-Investigator(Kenkyū-buntansha) 伊藤 智義  千葉大学, 大学院工学研究院, 教授 (20241862)
Project Period (FY) 2019-04-01 – 2022-03-31
Keywordsホログラフィ / 深層学習 / 3次元ディスプレイ
Outline of Annual Research Achievements

本研究課題は,次々世代のディスプレイ技術と期待されているホログラフィック3次元ディスプレイで課題となっている,(1) ホログラム計算の高速化,(2) より簡易な光学システムの実現,(3) 高画質な再生像を得ることができるホログラム最適化技術,について研究開発を行う.

本年度は膨大なホログラムの計算を高速化するために,スパース性(疎性)を利用したホログラム計算アルゴリズムを検討した.スパース性は信号処理の分野で近年重要なキーワードの一つになっているが,ホログラム計算の分野ではほとんど注目されていなかった.ホログラムの計算は,物体から発する光波をホログラム上ですべて足し合わせる必要があるため計算量が膨大なものとなる.しかし,ホログラム面での光波の分布は一見すると密なデータのように見えるが,見方を変えることで疎なデータとみなせる.具体的には短時間フーリエ変換を用いたアルゴリズムの実装を行う,このアルゴリズムをFPGAに実装することを検討した.本アルゴリズムをFPGAに実装することに成功し,CPUやGPUに比べ低消費電力でホログラム計算ができることを示し,CPUに比べ高速にホログラムを生成することに成功した.

本研究課題ではホログラム計算と深層学習の融合も一つの課題にあげている.本年度は,ホログラム画像をデータサイズを1/8に圧縮したものから,深層学習を用いて復号する技術の開発に成功した.圧縮にはホログラムに対して単純なバイナリ処理を施し,そのバイナリ化されたホログラムからもとの階調のあるホログラムを深層学習で推定した.提案手法は既存の圧縮技術(Jpeg2000,HEVC)よりも同ビットレートで圧縮・復調できることを示すことができた.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本年度は膨大なホログラムの計算を高速化するために,スパース性(疎性)を利用したホログラム計算アルゴリズムを検討した.具体的には短時間フーリエ変換を用いたアルゴリズムの実装を行った.はじめに固定小数点演算でこのアルゴリズムを実装し,演算精度などが十分化を見積もった.その後,FPGAに実装を行った.本アルゴリズムをFPGAに実装することに成功し,CPUやGPUに比べ低消費電力でホログラム計算ができることを示し,CPUに比べ高速にホログラムを生成することに成功した.

本研究課題ではホログラム計算と深層学習の融合も一つの課題にあげている.本年度は,ホログラム画像をデータサイズを1/8に圧縮したものから,深層学習を用いて復号する技術の開発に成功した.圧縮にはホログラムに対して単純なバイナリ処理を施し,そのバイナリ化されたホログラムからもとの階調のあるホログラムを深層学習で推定した.提案手法は既存の圧縮技術(Jpeg2000,HEVC)よりも同ビットレートで圧縮・復調できることを示すことができた.シミュレーションおよび光学実験の両面で,提案手法は従来手法よりも有効であった.この研究は,ワルシャワ工科大学,ブリュッセル自由大学との共同研究となっている.

Strategy for Future Research Activity

短時間フーリエ変換を用いたスパース性を利用したホログラム計算アルゴリズムの実装を行った.はじめに固定小数点演算でこのアルゴリズムを実装し,演算精度などが十分化を見積もった.その後,FPGAに実装を行った.本アルゴリズムをFPGAに実装することに成功し,CPUやGPUに比べ低消費電力でホログラム計算ができることを示し,CPUに比べ高速にホログラムを生成することに成功した.この実装は初号機的な側面があるため,実装およびCPUに比べ高速化に成功したが,さらに並列度を上げ,計算を高速化する必要がある.次年度も,引き続き並列度を上げる研究を行う予定である.

本研究課題ではホログラム計算と深層学習の融合も一つの課題にあげている.本年度は,ホログラム画像をデータサイズを1/8に圧縮したものから,深層学習を用いて復号する技術の開発に成功した.次年度は,圧縮技術を行うとともに,ホログラムの最適化に深層学習を利用し,最適化の高速化も検討する.

  • Research Products

    (26 results)

All 2020 2019

All Journal Article (8 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 8 results,  Open Access: 5 results) Presentation (18 results) (of which Int'l Joint Research: 10 results,  Invited: 4 results)

  • [Journal Article] Phase retrieval using axial diffraction patterns and a ptychographic iterative engine2020

    • Author(s)
      Yoshiya Wagatsuma, Tomoyoshi Shimobaba, Yota Yamamoto, Ikuo Hoshi, Takashi Kakue, and Tomoyoshi Ito
    • Journal Title

      Applied Optics

      Volume: 59 Pages: 354-362

    • Peer Reviewed
  • [Journal Article] Real-time color holographic video reconstruction using multiple-graphics processing unit cluster acceleration and three spatial light modulators2020

    • Author(s)
      Shohei Ikawa, Naoki Takada, Hiromitsu Araki, Hiroaki Niwase, Hiromi Sannomiya, Hirotaka Nakayama, Minoru Oikawa, Yuichiro Mori, Takashi Kakue, Tomoyoshi Shimobaba, and Tomoyoshi Ito
    • Journal Title

      Chinese Optics Letters

      Volume: 18 Pages: 10901

    • Peer Reviewed
  • [Journal Article] Efficient algorithms for the accurate propagation of extreme-resolution holograms"2019

    • Author(s)
      David Blinder, Tomoyoshi Shimobaba
    • Journal Title

      Optics Express

      Volume: 27 Pages: 29905-29915

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Dynamic range compression scheme for digital hologram using a deep neural network2019

    • Author(s)
      Tomoyoshi Shimobaba, David Blinder, Michal Makowski, Peter Schelkens, Yota Yamamoto, Ikuo Hoshi, Takashi Nishitsuji, Yutaka Endo, Takashi Kakue, Tomoyoshi Ito
    • Journal Title

      Optics Letters

      Volume: 44 Pages: 3038-3041

    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Real-time three-dimensional video reconstruction of real scenes with deep depth using electro-holographic display system2019

    • Author(s)
      Hidenari Yanagihara, Takashi Kakue, Yota Yamamoto, Tomoyoshi Shimobaba, Tomoyoshi Ito
    • Journal Title

      Optics Express

      Volume: 27 Pages: 15662-15678

    • Peer Reviewed / Open Access
  • [Journal Article] Electroholography of real scene by RGB-D camera and downsampling method2019

    • Author(s)
      Satoki Hasegawa, Hidenari Yanagihara, Yota Yamamoto, Takashi Kakue, Tomoyoshi Shimobaba, Tomoyoshi Ito
    • Journal Title

      OSA Continuum

      Volume: 2 Pages: 1629-1638

    • Peer Reviewed / Open Access
  • [Journal Article] Compression scheme of electro-holography based on the vector quantization of point light sources2019

    • Author(s)
      Takashi Nishitsuji, Yudai Hosono, Takashi Kakue, Tomoyoshi Shimobaba, Tomoyoshi Ito, Takuya Asaka
    • Journal Title

      Optics Express

      Volume: 27 Pages: 11594-11607

    • Peer Reviewed / Open Access
  • [Journal Article] Special-purpose computer for electroholography in embedded systems2019

    • Author(s)
      Yota Yamamoto,Nobuyuki Masuda, Ryuji Hirayama, Hirotaka Nakayama,Takashi Kakue,Tomoyoshi Shimobaba, Tomoyoshi Ito
    • Journal Title

      OSA Continuum

      Volume: 2 Pages: 1166-1173

    • Peer Reviewed / Open Access
  • [Presentation] Investigation of Single-Pixel Imaging using Recurrent Neural Network2019

    • Author(s)
      Ikuo Hoshi, Tomoyoshi Shimobaba, Takashi Kakue, Tomoyoshi Ito
    • Organizer
      International Conference on 3D Systems and Applications (3DSA2019)
    • Int'l Joint Research
  • [Presentation] Calculation Reduction Method for Computer-Generated Hologram using Angular Redundancy and Color Space Conversion2019

    • Author(s)
      Ryota Furukawa, Tomoyoshi Shimobaba, Takashi Kakue, Tomoyoshi Ito
    • Organizer
      The 11th International Conference on 3D Systems and Applications (3DSA2019)
    • Int'l Joint Research
  • [Presentation] Direct Light Removal and Image Quality Evaluation of Large Screen Holographic Projection2019

    • Author(s)
      Shoki Kikukawa, Tomoyoshi Shimobaba, Takashi Kakue, Tomoyoshi Ito
    • Organizer
      The 11th International Conference on 3D Systems and Applications (3DSA2019)
    • Int'l Joint Research
  • [Presentation] Hologram compression using deep-learning and complex amplitude encoding using binarized amplitude2019

    • Author(s)
      Tomoyoshi Shimobaba, Takashi Kakue, Tomoyoshi Ito
    • Organizer
      International Workshop on Holography and Related Technologies 2019 (IWH2019)
    • Int'l Joint Research / Invited
  • [Presentation] Deep-learning-based dynamic range compression for 3D scene hologram2019

    • Author(s)
      Tomoyoshi Shimobaba, David Blinder, Peter Schelkens, Yota Yamamoto, Ikuo Hoshi, Atsushi Shiraki, Takashi Kakue, Tomoyoshi Ito
    • Organizer
      International Conference on Optics & Electro-Optics XLIII Symposium of Optical Society of India (ICOL-2019)
    • Int'l Joint Research / Invited
  • [Presentation] Deep-learning-assisted hologram calculation via low-sampling holograms2019

    • Author(s)
      Tomoyoshi Shimobaba, David Blinder, Peter Schelkens, Yota Yamamoto, Ikuo Hoshi, Takashi Kakue, Tomoyoshi Ito
    • Organizer
      4th International Conference on Enterprise Architecture and Information Systems (EAIS2019)
    • Int'l Joint Research
  • [Presentation] Phase type special-purpose computer for electroholography in embedded systems2019

    • Author(s)
      Yota Yamamoto, Nobuyuki Masuda, Hirotaka Nakayama, Tomoyoshi Shimobaba, Takashi Kakue, Tomoyoshi Ito
    • Organizer
      4th International Conference on Enterprise Architecture and Information Systems (EAIS2019)
    • Int'l Joint Research
  • [Presentation] Point spread function engineering for wavelet-based hologram calculation2019

    • Author(s)
      Tomoyoshi Shimobaba, Shota Yamada, Takashi Kakue, Tomoyoshi Ito
    • Organizer
      the Special Session on "Digital Holography for Industrial Applications" (SS-DHIA) of the IEEE 28th International Symposium on Industrial Electronics (ISIE)
    • Int'l Joint Research / Invited
  • [Presentation] Fast calculation of computer-generated hologram using holographic stereogram with depth2019

    • Author(s)
      Ryota Furukawa, Tomoyoshi Shimobaba, Kakue Takashi, Tomoyoshi Ito
    • Organizer
      Information Photonics2019 (IP'19)
    • Int'l Joint Research
  • [Presentation] Dedicated computer for computer holography and its future outlook2019

    • Author(s)
      Takashi Nishitsuji, Yota Yamamoto, Takashige Sugie, Takashi Kakue, Hirotaka Nakayama, Tomoyoshi Shimobaba, Tomoyoshi Ito
    • Organizer
      SPIE Sensing Technology + Applications
    • Int'l Joint Research / Invited
  • [Presentation] 波面記録法におけるホログラム計算の光線追跡法とルックアップテーブル法の比較2019

    • Author(s)
      栁原秀成, 下馬場朋禄, 角江崇, 伊藤智義
    • Organizer
      レーザー学会学術講演会第40回年次大会
  • [Presentation] リカレントニューラルネットワークを用いたシングルピクセルイメージング画像の再構成2019

    • Author(s)
      星郁雄, 下馬場朋禄, 角江崇, 伊藤智義
    • Organizer
      レーザー学会学術講演会第40回年次大会
  • [Presentation] System on a Chipを用いた小型な電子ホログラフィ専用計算機の開発2019

    • Author(s)
      山本洋太, 増田信之, 下馬場朋禄, 角江崇, 伊藤智義
    • Organizer
      レーザー学会学術講演会第40回年次大会
  • [Presentation] ランダム位相フリー法を用いた位相型ホログラムの画質改善とシミュレーションによる検証2019

    • Author(s)
      山口由美, 長浜佑樹, 山本洋太, 下馬場朋禄, 角江崇, 伊藤智義
    • Organizer
      令和元年第3回ホログラフィック・ディスプレイ研究会
  • [Presentation] 組み込みシステム向け位相変調型電子ホログラフィ専用計算機の開発2019

    • Author(s)
      山本洋太, 増田信之, 下馬場朋禄, 角江崇, 伊藤智義
    • Organizer
      第18回情報科学技術フォーラム(FIT2019)
  • [Presentation] 深層学習を用いたデジタルホログラム圧縮手法の研究2019

    • Author(s)
      星郁雄,下馬場朋禄, David Blidner, 角江崇, 伊藤智義
    • Organizer
      第13回慎画像システム・情報フォトニクス研究討論会
  • [Presentation] 点群のベクトル量子化に基づく電子ホログラフィの圧縮伝送方式2019

    • Author(s)
      西辻崇, 細野湧大, 角江崇, 下馬場朋禄, 伊藤智義, 朝香卓也
    • Organizer
      2019年第2回 ホログラフィック・ディスプレイ研究会
  • [Presentation] 電子ホログラフィ向け専用計算機の開発2019

    • Author(s)
      山本洋太, 増田信之, 角江崇, 下馬場朋禄, 伊藤智義
    • Organizer
      LSIとシステムのワークショップ2019

URL: 

Published: 2021-01-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi