• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2010 Fiscal Year Annual Research Report

非対称カメラアレイによる再構築型光線空間取得

Research Project

Project/Area Number 22700174
Research InstitutionNagoya Institute of Technology

Principal Investigator

福嶋 慶繁  名古屋工業大学, 大学院・工学研究科, 助教 (80550508)

Keywords自由視点映像合成 / 超解像 / 光線空間 / 異種カメラ / カメラアレイ / コンピュテショナルフォトグラフィ
Research Abstract

今年度の目標通り,「カメラアレイを用いた自由視点映像生成の高品質化・高解像度化」を達成すべく,二通りのアプローチで研究を行った.
一つめは,すべて同じ解像度のカメラを持つカメラアレイ(複数台のカメラを整列させたもの)で取得された多視点映像を用い,超解像処理と呼ばれる画像解像度を向上させる手法と自由視点画像合成を同時に行うことができるアルゴリズムの研究である.自由視点映像を生成するときには,合成映像の画素をブレンドする処理を行うが,このブレンド処理を超解像処理に置き換えることで本手法を達成した.二つ目は,多視点カメラに複数個の高解像度なカメラを混合し,画像合成のときに優先的に高解像度映像の情報を使うことで高解像度な自由視点映像を生成可能にする手法である.高解像度,低解像度のカメラの距離や解像度の組み合わせを,奥行き推定の精度や合成に使用する画像(テクスチャ)の分解能を考慮して選択することで大幅に画像品質が向上した.高解像度と低解像度を組み合わせるには各画像の周波数特性が重要であることが明らかとなり,次年度計画である焦点の違いによる奥行き推定と画像合成の混合の研究につながる.
前者の研究は,処理コストが大きいものの,どのようなカメラ構成であっても有効に働く手法である.従来手法ではカメラアレイから前進した位置での視点の映像品質が大幅に低下していたが,本手法により高く品質を維持できることが可能になった.後者の研究は特殊なカメラアレイの構成が必要となるが,すでに高解像度なカメラが混合されているため簡易な計算で高解像度な自由視点映像を習得することが可能となる.そのカメラアレイの有効な配置方法やレンダリング範囲を特定した.特に後者は,自由視点映像生成に特化したカメラアレイの構築により,高品質な自由視点映像を複雑な計算を行うことなく簡便に得ることが可能となった.

  • Research Products

    (35 results)

All 2011 2010 Other

All Journal Article (3 results) (of which Peer Reviewed: 3 results) Presentation (31 results) Remarks (1 results)

  • [Journal Article] A Semi-Automatic Depth Estimation Method for FTV2010

    • Author(s)
      Meindert Onno Wildeboer
    • Journal Title

      The Journal of The Institute of Image Information and Television Engineers

      Volume: 64(11) Pages: 1678-1684

    • Peer Reviewed
  • [Journal Article] 立体映像通信における画像間でのフレーム遅延が立体視へ与える影響2010

    • Author(s)
      澤祐一郎
    • Journal Title

      電子情報通信学会論文誌

      Volume: J93-D(9) Pages: 1700-1703

    • Peer Reviewed
  • [Journal Article] 超解像処理による自由視点画像の画質改善2010

    • Author(s)
      福嶋慶繁
    • Journal Title

      電子情報通信学会論文誌

      Volume: J93-D(9) Pages: 1700-1703

    • Peer Reviewed
  • [Presentation] 自由視点映像通信におけるQoE評価:ネットワーク遅延が視点変更に及ぼす影響2011

    • Author(s)
      立松綾乃
    • Organizer
      電子情報通信学会CQ研究会
    • Place of Presentation
      やすらぎ伊王島,長崎
    • Year and Date
      2011-03-08
  • [Presentation] Novel view synthesis for dynamic scene using moving multi-camera array2011

    • Author(s)
      Takanori Yokoi
    • Organizer
      SPIE Stereoscopic Displays and Applications XXII
    • Place of Presentation
      San Francisco, USA
    • Year and Date
      2011-01-24
  • [Presentation] Free-viewpoint Image Generation from a Video Captured by a Handheld Camera2011

    • Author(s)
      Kota Takeuchi
    • Organizer
      SPIE Stereoscopic Displays and Applications XXII
    • Place of Presentation
      San Francisco, USA
    • Year and Date
      2011-01-24
  • [Presentation] Multi-view Ray acquisition using Camera and Mirror System2011

    • Author(s)
      Ryo Fukami
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT 2011)
    • Place of Presentation
      Jakarta, Indonesia
    • Year and Date
      2011-01-08
  • [Presentation] Resolution Improvement of Free-viewpoint Image Generation2011

    • Author(s)
      Kengo Ando
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT 2011)
    • Place of Presentation
      Jakarta, Indonesia
    • Year and Date
      2011-01-08
  • [Presentation] Free Viewpoint Image Rendering System in a Network Environment2011

    • Author(s)
      Norishige Fukushima
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT 2011)
    • Place of Presentation
      Jakarta, Indonesia
    • Year and Date
      2011-01-07
  • [Presentation] Free-viewpoint Image Generation using Structure from Motion2011

    • Author(s)
      Kota Takeuchi
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT 2011)
    • Place of Presentation
      Jakarta, Indonesia
    • Year and Date
      2011-01-07
  • [Presentation] Free-viewpoint Image Generation using Moving Object Detection2011

    • Author(s)
      Kazuma Suzuki
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT 2011)
    • Place of Presentation
      Jakarta, Indonesia
    • Year and Date
      2011-01-07
  • [Presentation] Rectification of Camera Array using Bundle Adjustment2011

    • Author(s)
      Dohyung Kim
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT 2011)
    • Place of Presentation
      Jakarta, Indonesia
    • Year and Date
      2011-01-07
  • [Presentation] Influences of Frame Delay and Packet Loss between Left and Right Frames in Stereoscopic Video Communications2010

    • Author(s)
      Shuliang Lin
    • Organizer
      Picture Coding Symposium (PCS2010)
    • Place of Presentation
      Nagoya, Japan
    • Year and Date
      2010-12-10
  • [Presentation] Free-Viewpoint Image Generation Using Different Focal Length Camera Array2010

    • Author(s)
      Kengo Ando
    • Organizer
      Picture Coding Symposium (PCS2010)
    • Place of Presentation
      Nagoya, Japan
    • Year and Date
      2010-12-10
  • [Presentation] Parallel Processing Method for Realtime FTV2010

    • Author(s)
      Kazuma Suzuki
    • Organizer
      Picture Coding Symposium (PCS2010)
    • Place of Presentation
      Nagoya, Japan
    • Year and Date
      2010-12-10
  • [Presentation] Free viewpoint Image Generation with Super Resolution2010

    • Author(s)
      Norishige Fukushima
    • Organizer
      Picture Coding Symposium (PCS2010)
    • Place of Presentation
      Nagoya, Japan
    • Year and Date
      2010-12-08
  • [Presentation] Influences of Delay Jitter on Stereoscopic Vision in Stereo Video Communications2010

    • Author(s)
      Shuliang Lin
    • Organizer
      Workshop on Picture Coding and Image Processing (WPCIP2010)
    • Place of Presentation
      Nagoya, Japan
    • Year and Date
      2010-12-07
  • [Presentation] Multi-view Ray Acquisition Using Hybrid Camera and Mirror System2010

    • Author(s)
      Ryo Fukami
    • Organizer
      Workshop on Picture Coding and Image Processing (WPCIP2010)
    • Place of Presentation
      Nagoya, Japan
    • Year and Date
      2010-12-07
  • [Presentation] Calibration of Camera Array Using Bundle Adjustment2010

    • Author(s)
      Dohyung Kim
    • Organizer
      Workshop on Picture Coding and Image Processing (WPCIP2010)
    • Place of Presentation
      Nagoya, Japan
    • Year and Date
      2010-12-07
  • [Presentation] 動物体抽出を用いた自由視点画像合成2010

    • Author(s)
      鈴木和真
    • Organizer
      電子情報通信学会画像工学研究会
    • Place of Presentation
      名古屋大学, 名古屋
    • Year and Date
      2010-12-02
  • [Presentation] SfM位置推定による静的シーンの自由視点画像生成2010

    • Author(s)
      竹内広太
    • Organizer
      電子情報通信学会画像工学研究会
    • Place of Presentation
      名古屋大学, 名古屋
    • Year and Date
      2010-12-02
  • [Presentation] リアルタイム通信のためのDIBRによる自由視点映像合成2010

    • Author(s)
      福嶋慶繁
    • Organizer
      電子情報通信学会パターン認識・メディア理解研究会
    • Place of Presentation
      フェニックスプラザ,福井
    • Year and Date
      2010-11-19
  • [Presentation] SFMを用いたハンディカメラからの自由視点画像生成2010

    • Author(s)
      竹内広太
    • Organizer
      2010年映像情報メディア学会年次大会
    • Place of Presentation
      愛媛大学,松山市
    • Year and Date
      2010-09-01
  • [Presentation] カメラと鏡のハイブリッド取得による光線の多点取得2010

    • Author(s)
      深見遼
    • Organizer
      2010年映像情報メディア学会年次大会
    • Place of Presentation
      愛媛大学,松山市
    • Year and Date
      2010-09-01
  • [Presentation] SFM位置推定による自由視点画像生成2010

    • Author(s)
      竹内広太
    • Organizer
      平成22年度電気関係学会東海支部連合大会
    • Place of Presentation
      中部大学,名古屋
    • Year and Date
      2010-08-30
  • [Presentation] 低解像度と高解像度カメラからの自由視点画像生成2010

    • Author(s)
      安藤建吾
    • Organizer
      平成22年度電気関係学会東海支部連合大会
    • Place of Presentation
      中部大学,名古屋
    • Year and Date
      2010-08-30
  • [Presentation] 実時間自由視点画像合成のための並列処理手法2010

    • Author(s)
      鈴木和真
    • Organizer
      平成22年度電気関係学会東海支部連合大会
    • Place of Presentation
      中部大学,名古屋
    • Year and Date
      2010-08-30
  • [Presentation] カメラと平面鏡によるハイブリッド多点光線取得システム2010

    • Author(s)
      深見遼
    • Organizer
      平成22年度電気関係学会東海支部連合大会
    • Place of Presentation
      中部大学,名古屋
    • Year and Date
      2010-08-30
  • [Presentation] 多視点映像からの自由視点映像合成2010

    • Author(s)
      福嶋慶繁
    • Organizer
      電気学会東海支部若手セミナー
    • Place of Presentation
      名古屋工業大学,名古屋(招待講演)
    • Year and Date
      2010-08-27
  • [Presentation] 異なる解像度のカメラからの自由視点画像生成2010

    • Author(s)
      安藤建吾
    • Organizer
      電子情報通信学会画像工学研究会
    • Place of Presentation
      屋久島,鹿児島
    • Year and Date
      2010-07-26
  • [Presentation] A Semi-Automatic Multi-View Depth Estimation Method2010

    • Author(s)
      Meindert Onno Wildeboer
    • Organizer
      Visual Communications and Image Processing (VCIP2010)
    • Place of Presentation
      Huang Shan, An Hui, China
    • Year and Date
      2010-07-14
  • [Presentation] 自然特徴点追跡による自由視点画像生成2010

    • Author(s)
      竹内広太
    • Organizer
      3次元画像コンファレンス2010
    • Place of Presentation
      東京大学,東京
    • Year and Date
      2010-07-09
  • [Presentation] 直接光と反射光のハイブリッド取得による多点光線取得2010

    • Author(s)
      深見遼
    • Organizer
      3次元画像コンファレンス2010
    • Place of Presentation
      東京大学,東京
    • Year and Date
      2010-07-09
  • [Presentation] Real-Time Free Viewpoint Image Rendering by Using Fast Multi-pass Dynamic Programming2010

    • Author(s)
      Norishige Fukushima
    • Organizer
      3DTV-CON2010
    • Place of Presentation
      Helsinki, Finland
    • Year and Date
      2010-06-08
  • [Remarks]

    • URL

      http://nma.web.nitech.ac.jp/fukushima/multiview/2darray.html

URL: 

Published: 2012-07-19  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi