• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

四次元視点移動を可能にする自由視点画像生成

Research Project

Project/Area Number 13J07448
Research Category

Grant-in-Aid for JSPS Fellows

Allocation TypeSingle-year Grants
Section国内
Research Field Media informatics/Database
Research InstitutionNara Institute of Science and Technology

Principal Investigator

大倉 史生  奈良先端科学技術大学院大学, 情報科学研究科, 特別研究員(PD)

Project Period (FY) 2013 – 2015-03-31
Project Status Discontinued (Fiscal Year 2014)
Budget Amount *help
¥2,070,000 (Direct Cost: ¥1,800,000、Indirect Cost: ¥270,000)
Fiscal Year 2014: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
Fiscal Year 2013: ¥900,000 (Direct Cost: ¥900,000)
Keywordsコンピュータグラフィックス / テクスチャ合成 / 色調合成 / 季節変化 / 複合現実感 / イメージベースドレンダリング / 視点依存テクスチャマッピング / 仮想物体合成
Outline of Annual Research Achievements

フランスINRIAのREVESグループにおよそ10ヶ月間滞在し、G. Drettakis, A. Bousseau, K. VanhoeyおよびUC BerkeleyのA. Efrosと共同で、色調合成(color transfer)とテクスチャ合成(texture transfer)法を併用し、写真中の季節変化を表現する手法を開発した。これは、前年度に取り組んだ、イメージベースドレンダリング(IBR)による現実空間の仮想化に基づく軽量・写実的な仮想物体合成手法によって実現される長い時間の変化(遠い過去・未来)を表現する手法と、すでにいくつかの従来研究で実現されてきた、光源付与による短い時間の変化(時間・天気変化)を実現する手法では実現できない時間変化を表現する、いわば本研究課題の四次元自由視点画像生成におけるミッシングリンクを埋める研究であり、本研究課題の最終年度にふさわしい内容となった。
提案手法は、変換ターゲットとなる画像および、学習用画像群を入力とする。従来、同様の入力を対象とした色調合成手法、テクスチャ合成手法が提案されてきた。しかし、前者は物体のテクスチャ・形状変化を表現できない。また、後者はターゲット画像中のシーン構造を大きく変化させる。我々は、両手法を選択的に用いることで、ターゲット画像の構造を保持したまま、テクスチャ変化を表現する手法を開発した。具体的には、ターゲット画像中で色調合成が十分に学習画像内の変化を表現しているかどうかを予測し、そうでない部分(テクスチャ合成が必要な部分)のみにテクスチャを合成する。
提案手法により、テクスチャの変化を伴う情景変化(樹木の変化、積雪、洪水など)を表現することが可能であることを実証した。以上の研究成果を、コンピュータグラフィックスのトップカンファレンスであるSIGGRAPH 2015に投稿した。

Research Progress Status

本研究課題は平成26年度が最終年度のため、記入しない。

Strategy for Future Research Activity

本研究課題は平成26年度が最終年度のため、記入しない。

Report

(2 results)
  • 2014 Annual Research Report
  • 2013 Annual Research Report
  • Research Products

    (16 results)

All 2014 2013 Other

All Journal Article (4 results) (of which Peer Reviewed: 4 results) Presentation (10 results) Remarks (2 results)

  • [Journal Article] Aerial full spherical HDR imaging and display2014

    • Author(s)
      Fumio Okura, Masayuki Kanbara, Naokazu Yokoya
    • Journal Title

      Virtual Reality

      Volume: 18 Issue: 4 Pages: 255-269

    • DOI

      10.1007/s10055-014-0249-x

    • Related Report
      2014 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Background estimation for a single omnidirectional image sequence captured with a moving camera2014

    • Author(s)
      Norihiko Kawai, Naoya Inoue, Tomokazu Sato, Fumio Okura, Yuta Nakashima, Naokazu Yokoya
    • Journal Title

      IPSJ Trans. on Computer Vision and Applications

      Volume: 6 Pages: 68-72

    • Related Report
      2014 Annual Research Report
    • Peer Reviewed
  • [Journal Article] [Paper] Free-viewpoint Mobile Robot Teleoperation Interface Using View-dependent Geometry and Texture2014

    • Author(s)
      Fumio Okura, Yuko Ueda, Tomokazu Sato, Naokazu Yokoya
    • Journal Title

      ITE Transactions on Media Technology and Applications

      Volume: 2 Issue: 1 Pages: 82-93

    • DOI

      10.3169/mta.2.82

    • NAID

      130004974709

    • ISSN
      2186-7364
    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Mixed-reality world exploration using image-based rendering

    • Author(s)
      Fumio Okura, Masayuki Kanbara, Naokazu Yokoya
    • Journal Title

      ACM Journal on Computing and Cultural Heritage

    • Description
      【掲載確定】印刷中
    • Related Report
      2014 Annual Research Report
    • Peer Reviewed
  • [Presentation] Indirect augmented reality considering real-world illumination change2014

    • Author(s)
      Fumio Okura, Takayuki Akaguma, Tomokazu Sato, Naokazu Yokoya
    • Organizer
      13th IEEE Int'l Symp. on Mixed and Augmented Reality (ISMAR'14)
    • Place of Presentation
      ミュンヘン工科大学(ドイツ ミュンヘン)
    • Year and Date
      2014-09-10 – 2014-09-12
    • Related Report
      2014 Annual Research Report
  • [Presentation] 自由視点画像生成に基づく移動撮影した全方位動画像からの動物体除去2014

    • Author(s)
      井上直哉
    • Organizer
      2014年電子情報通信学会総合大会
    • Place of Presentation
      新潟大学
    • Year and Date
      2014-03-19
    • Related Report
      2013 Annual Research Report
  • [Presentation] 実シーンの照明環境を考慮した事前生成型拡張現実感システム2014

    • Author(s)
      赤熊高行
    • Organizer
      電子情報通信学会パターン認識・メディア理解研究会
    • Place of Presentation
      福岡大学
    • Year and Date
      2014-02-14
    • Related Report
      2013 Annual Research Report
  • [Presentation] Mobile AR using pre-captured omnidirectional images2013

    • Author(s)
      Takayuki Akaguma
    • Organizer
      ACM SIGGRAPH Asia 2013 Symp. on Mobile Graphics and Interactive Applications
    • Place of Presentation
      Hong Kong Convention and Exhibition Centre, Hong Kong, China
    • Year and Date
      2013-11-21
    • Related Report
      2013 Annual Research Report
  • [Presentation] 自由視点画像生成による移動ロボットの遠隔操縦インタフェース2013

    • Author(s)
      大倉史生
    • Organizer
      電気関係学会関西支部連合大会
    • Place of Presentation
      大阪電気通信大学
    • Year and Date
      2013-11-16
    • Related Report
      2013 Annual Research Report
  • [Presentation] Teleoperation of mobile robots by generating augmented free-viewpoint images2013

    • Author(s)
      Fumio Okura
    • Organizer
      IEEE/RSJ Int'l Conf. on Intelligent Robots and S ystems (IROS'13)
    • Place of Presentation
      Tokyo Big Sight, Tokyo, Japan
    • Year and Date
      2013-11-04
    • Related Report
      2013 Annual Research Report
  • [Presentation] Interactive exploration of augmented aerial scenes with free-viewpoint image generation from pre-rendered images2013

    • Author(s)
      Fumio Okura
    • Organizer
      12th IEEE Int'l Symp. on Mixed and Augmented Reality (ISMAR'13)
    • Place of Presentation
      University of South Austr alia, Adelaide, Australia
    • Year and Date
      2013-10-02
    • Related Report
      2013 Annual Research Report
  • [Presentation] 事前レンダリング画像群を用いた自由視点画像生成に基づく写実的な拡張現実画像合成2013

    • Author(s)
      大倉史生
    • Organizer
      日本バーチャルリアリティ学会複合現実感研究会
    • Place of Presentation
      利尻町交流促進施設「どんと」
    • Year and Date
      2013-09-26
    • Related Report
      2013 Annual Research Report
  • [Presentation] 事前生成型モバイルAR2013

    • Author(s)
      赤熊高行
    • Organizer
      日本バーチャルリアリティ学会第18回大会
    • Place of Presentation
      グランフロント大阪
    • Year and Date
      2013-09-20
    • Related Report
      2013 Annual Research Report
  • [Presentation] 事前レンダリングと自由視点画像生成による仮想化実空間への仮想物体の写実的合成2013

    • Author(s)
      大倉史生
    • Organizer
      画像の認識・理解シンポジウム(MIRU2013)
    • Place of Presentation
      国立情報学研究所
    • Year and Date
      2013-07-31
    • Related Report
      2013 Annual Research Report
  • [Remarks]

    • URL

      http://yokoya.naist.jp/fumio-o/

    • Related Report
      2014 Annual Research Report
  • [Remarks]

    • URL

      http://yokoya.naist.jp/~fumio-o/research.html

    • Related Report
      2013 Annual Research Report

URL: 

Published: 2014-01-29   Modified: 2024-03-26  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi