• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2013 Fiscal Year Research-status Report

次世代型超高精細超解像技術の確立およびシステムの開発

Research Project

Project/Area Number 25820158
Research Category

Grant-in-Aid for Young Scientists (B)

Research InstitutionNagoya Institute of Technology

Principal Investigator

後藤 富朗  名古屋工業大学, 工学(系)研究科(研究院), 助教 (20324478)

Project Period (FY) 2013-04-01 – 2016-03-31
KeywordsTV正則化法による超解像画像の画質改善 / 事例学習法の性能改善 / GPGPUサーバへの超解像システムの実装
Research Abstract

(1)TV正則化法の改善については、TV正則化拡大関数の中に、ボケ要素を改善する畳込積分項を設ける手法では、演算時間が非常に大きいことが問題となっている。この解決策として、非線形フィルタを用いた超解像手法を確認中であり、この方法によって、大幅な演算時間の削減とともに、シャープなエッジの立ち上がりを実現することを目指した。その結果、TV正則化法とShockフィルタを用いた手法により、ボケ作用素を用いたTV正則化手法とほぼ同等の画質改善を行うことができ、演算時間を大幅に短縮できることを確認した。
(2)事例学習法の改善については、TV正則化法を用いた事例学習法は大きな性能改善が見込まれるため、それを目指して、LLE法、主成分分析法、クラスタリング法などを適用して実験を試みた。また参照画像の数とパッチサイズの大きさと画質改善の関係を解明することによって最適な事例学習法の解を求めた。その結果、処理時間の短縮には成功したが、処理時間を短縮させればさせる程、画質が劣化してしまうことも確認できた。そのため、事例学習法による画質改善にはあまり期待できないことを確認した。
(3)GPGPUサーバへのシステムの実装については、GPGPUサーバ上にシステムを実装し、ハイビジョン映像に対する処理性能について検証した。その結果、最新のGPGPU(NVIDIA社製Geforce GTX TITAN)において実時間処理が可能であることを確認した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

(1)提案したTV正則化法と事例学習法の組み合せによる超解像度画像復元法がどこまでの高性能を有するものなのかを明確にし、他方式との比較を行った。
(2)TV正則化手法の最も優れているとされるアルゴリズム(Chambolleの射影法)を、4方向TVの採用と、時間方向の拡張によって、演算時間を従来法に比べ約1/10に改善した。
(3)事例学習法の種々のアルゴリズムの改良に取り組み、画質改善およびその計算時間を短縮し、TV正則化手法と同じ処理時間となった。
(4)本アルゴリズムを汎用画像処理プロセッサ(GPGPU)上に実装し、ハイビジョン動画像の次世代型超高精細超解像システムを構築した。
以上より、おおむね順調に進展している。

Strategy for Future Research Activity

(1)TV正則化法の演算時間の改善について、TV正則化法の解法としては、Chambolleの射影法は、この分野では最も優れた方法として確立している。この方式において、まず、2方向のTV項を4方向に拡大し、まず収束速度を2倍にする。次に、アルゴリズムを時間方向に拡大し、約5倍の収束速度の改善をめざす。この結果、全体の収束時間は現在のアルゴリズムの1/10となることが予想される。
(2) 事例学習法の処理速度の改善について、TV正則化法を用いることによって、事例学習法の速度が改善されるということは、本方式によって初めて得られた知見である。この利点を生かすべく、パッチサイズの拡大、参照画像の限定、主成分分析、K-means法によるクラスタリングなどを用いて、可能な限り、事例学習法の処理時間を削減する。最終目標としては、TV正則化アルゴリズムと同時間、すなわちC言語シミュレーションで数秒程度を目指す。
(3) 画質評価法の確立について、超解像度画像に適した客観的画質評価法を確立し、超解像技術の性能評価を行う。
(4) 複数GPGPUサーバによるシステムの構築について、複数GPGPUサーバを用いたシステムの構築を行い、各サーバを協調動作させることでシステムの高速化を図り、フルハイビジョン映像のリアルタイム超解像を実現させる。

Expenditure Plans for the Next FY Research Funding

平成25年度の予定していた発表を平成26年度の発表に変更したため、差額が生じているが、発表内定は既に出ているため、平成26年度中の旅費として支出予定である。
4Kディスプレイを購入し、2台のサーバにシステム構築を行い、サーバを協調動作させることでシステムの更なる高速化を図る。旅費関連としては、国内・海外発表を主体とする。また、これまでの成果を論文にまとめる。
平成25年度の繰越金額は、国際会議発表旅費(ICPR2014、採録決定済)の出張旅費に充てる。ICPR2014(IEEE International Conference on Pattern Recognition)は、2014年8月24日~8月28日にストックホルム(スウェーデン)にて開催され、発表題目は、「Super-Resolution System for 4K-HDTV」を予定している。

  • Research Products

    (16 results)

All 2014 2013

All Journal Article (3 results) (of which Peer Reviewed: 3 results) Presentation (11 results) Patent(Industrial Property Rights) (2 results)

  • [Journal Article] Super-Resolution System for 4K-HDTV2014

    • Author(s)
      Tomio Goto, Takafumi Fukuoka, Fumiya Nagashima, Satoshi Hirano, Masaru Sakurai
    • Journal Title

      Proceeding of International Conference on Pattern Recognition

    • Peer Reviewed
  • [Journal Article] SUPER-RESOLUTION THROUGH NON-LINEAR ENHANCEMENT FILTERS2013

    • Author(s)
      Masaru Sakurai, Yasuhiro Sakuta, Masashi Watanabe, Tomio Goto, Satoshi Hirano
    • Journal Title

      Proceeding of International Conference on Image Processing 2013

      Pages: 854, 858

    • Peer Reviewed
  • [Journal Article] Improving Image Quality of Super-resolution with Total Variation Regularization and Shock filter2013

    • Author(s)
      Fumiya Nagashima, Masashi Watanabe, Tomio Goto, Satoshi Hirano, Masaru Sakurai
    • Journal Title

      Proceeding of Global Conference on Consumer Electronics

      Pages: 447, 448

    • Peer Reviewed
  • [Presentation] Super-Resolution System for 4K-HDTV2014

    • Author(s)
      Tomio Goto, Takafumi Fukuoka, Fumiya Nagashima, Satoshi Hirano, Masaru Sakurai
    • Organizer
      IEEE International Conference on Pattern Recognition
    • Place of Presentation
      ストックホルム(スウェーデン)
    • Year and Date
      20140824-20140828
  • [Presentation] 4K-HDTV用超解像システムの提案2014

    • Author(s)
      後藤恭平, 長島史弥, 後藤富朗, 平野智, 桜井優
    • Organizer
      電子情報通信学会 総合大会
    • Place of Presentation
      新潟大学
    • Year and Date
      20140318-20140321
  • [Presentation] 超解像方式における画像の圧縮ひずみ除去に関する研究2014

    • Author(s)
      松村翔, 福岡貴史, 後藤富朗, 平野智, 桜井優
    • Organizer
      電子情報通信学会 総合大会
    • Place of Presentation
      新潟大学
    • Year and Date
      20140318-20140321
  • [Presentation] テクスチャ成分を用いた学習型超解像手法の性能改善2013

    • Author(s)
      三浦俊司, 後藤富朗, 平野智, 桜井優
    • Organizer
      映像情報メディア学会 冬季大会
    • Place of Presentation
      芝浦工業大学
    • Year and Date
      20131218-20131219
  • [Presentation] TV正則化フィルタと Shock フィルタを用いた超解像手法の検討2013

    • Author(s)
      渡辺将史, 長島史弥, 後藤富朗, 平野智, 桜井優
    • Organizer
      電子情報通信学会 信号処理シンポジウム
    • Place of Presentation
      海峡メッセ下関
    • Year and Date
      20131119-20131122
  • [Presentation] TV 正則化を用いた学習型超解像の高精細化に関する研究2013

    • Author(s)
      鈴木悠平, 三浦俊司, 後藤富朗, 平野智, 桜井優
    • Organizer
      電子情報通信学会 映像メディア処理シンポジウム(IMPS)
    • Place of Presentation
      ニューウェルシティ湯河原
    • Year and Date
      20131106-20131108
  • [Presentation] Improving Image Quality of Super-resolution with Total Variation Regularization and Shock filter2013

    • Author(s)
      Fumiya Nagashima, Masashi Watanabe, Tomio Goto, Satoshi Hirano, Masaru Sakurai
    • Organizer
      IEEE Global Conference on Consumer Electronics 2013 (GCCE2013)
    • Place of Presentation
      東京
    • Year and Date
      20131001-20131005
  • [Presentation] MPEG-2 動画像に対する圧縮歪み低減システムのGPUへの実装2013

    • Author(s)
      福岡貴史, 後藤富朗, 平野智, 桜井優
    • Organizer
      電気関係学会 東海支部連合大会
    • Place of Presentation
      静岡大学
    • Year and Date
      20130924-20130925
  • [Presentation] Total Variation 正則化手法とShock Filterを組み合わせた超解像手法の改善2013

    • Author(s)
      長島史弥, 後藤富朗, 平野智, 桜井優
    • Organizer
      電気関係学会 東海支部連合大会
    • Place of Presentation
      静岡大学
    • Year and Date
      20130924-20130925
  • [Presentation] 超解像画像の圧縮ひずみ除去に関する研究2013

    • Author(s)
      李海蓮, 後藤富朗, 平野智, 桜井優
    • Organizer
      電気関係学会 東海支部連合大会
    • Place of Presentation
      静岡大学
    • Year and Date
      20130924-20130925
  • [Presentation] SUPER-RESOLUTION THROUGH NON-LINEAR ENHANCEMENT FILTERS2013

    • Author(s)
      Masaru Sakurai, Yasuhiro Sakuta, Masashi Watanabe, Tomio Goto, Satoshi Hirano
    • Organizer
      IEEE International Conference on Image Processing 2013 (ICIP2013)
    • Place of Presentation
      メルボルン(オーストラリア)
    • Year and Date
      20130915-20130918
  • [Patent(Industrial Property Rights)] 特許願2013

    • Inventor(s)
      後藤富朗, 桜井優
    • Industrial Property Rights Holder
      名古屋工業大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2013-179471
    • Filing Date
      2013-08-30
  • [Patent(Industrial Property Rights)] 特許願2013

    • Inventor(s)
      後藤富朗, 桜井優
    • Industrial Property Rights Holder
      名古屋工業大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2013-187263
    • Filing Date
      2013-09-10

URL: 

Published: 2015-05-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi