• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2014 年度 実施状況報告書

インタラクティブ高臨場感テレプレゼンスのための全方位シネマグラフ生成

研究課題

研究課題/領域番号 25540086
研究機関奈良先端科学技術大学院大学

研究代表者

横矢 直和  奈良先端科学技術大学院大学, 情報科学研究科, 教授 (10252834)

研究分担者 河合 紀彦  奈良先端科学技術大学院大学, 情報科学研究科, 助教 (30610670)
佐藤 智和  奈良先端科学技術大学院大学, 情報科学研究科, 准教授 (50362835)
研究期間 (年度) 2013-04-01 – 2016-03-31
キーワードシネマグラフ / 背景画像生成 / 画像修復 / 全方位映像 / テレプレゼンス / バーチャルリアリティ
研究実績の概要

1.自由視点画像生成手法の開発:シネマグラフ生成において必要となる、単一視点の動画像を生成するための自由視点画像生成手法を開発した。具体的には、視点依存テクスチャマッピングにおける最適なテクスチャの切り替え位置のを決定手法および、三次元形状にテクスチャをマッピングしレンダリングした際の、直線の歪みやテクスチャの切り替え位置でのずれを補償するテクスチャ変形手法を開発した。
2.背景画像生成手法の開発:屋外環境を移動撮影した全方位映像を用いた実験を行い、前年度に開発した背景画像生成手法の有効性の検証を行った。
3.画像修復手法の開発:映像中に立ち止まった人等の一時的に静止した物体の背景画像を取得するための画像修復手法の開発を行い、様々なシーンを撮影した画像を用いて提案手法の有効性を検証した。
4.動物体のテクスチャ生成・合成手法の開発:シネマグラフ生成において必要となる、ある視点から撮影された動物体を異なる視点からの動物体テクスチャに変換し合成する手法を開発した。具体的には、単一のRGB-Dカメラにより動作を伴う人物の映像と姿勢データを記録し、後に拡張現実感技術により、任意の視点からの動作を伴う人物のテクスチャを生成・合成する手法を開発した。
5.移動撮影した映像からのシネマグラフ生成手法の開発:自由視点画像生成手法により異なる視点の画像群を単一視点画像群に変換し、それに対してシネマグラフ生成手法を適用することで、移動撮影された映像からあるフレームでのシネマグラフを生成する手法を開発した。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

平成26年度に計画していた、(c)背景画像生成手法、(d)動物体のテクスチャ生成・合成手法の開発を含む、シネマグラフ生成に必要な複数の要素技術を開発した。また、様々な屋内外環境で取得したデータを用いて実験を行い、提案手法の有効性を検証することができた。

今後の研究の推進方策

平成27年度は、当初の計画通り、これまで開発してきた成果を統合し、任意のフレームにおいて動物体が無限に動く全方位シネマグラフを生成し、それに基づくテレプレゼンスシステムを構築する。また、システムを被験者に体験してもらい、生成映像の受容性を確認し、システムの有効性を検証する。

次年度使用額が生じた理由

採択された論文の投稿料が会議の特集号により無料であったため、当初予定していた投稿料を計上しなかった。また、次年度に当初の予定より多くの国際会議への参加を予定しており、当該年度での経費の利用を必要最小限に抑えた。これらにより、次年度使用額が生じた。

次年度使用額の使用計画

国際会議への論文を既に複数投稿中、またこれから投稿予定であるため、当初の予定より多くの旅費および会議参加費を計上する予定である。また、当初予定していた通り、計算機の消耗品、評価のための人件費・謝金、論文誌への投稿料を計上する予定である。

  • 研究成果

    (9件)

すべて 2015 2014

すべて 雑誌論文 (3件) (うち査読あり 3件、 オープンアクセス 1件、 謝辞記載あり 3件) 学会発表 (6件)

  • [雑誌論文] Background estimation for a single omnidirectional image sequence captured with a moving camera2014

    • 著者名/発表者名
      Norihiko Kawai, Naoya Inoue, Tomokazu Sato, Fumio Okura, Yuta Nakashima, Naokazu Yokoya
    • 雑誌名

      IPSJ Trans. on Computer Vision and Applications

      巻: 6 ページ: 68-72

    • DOI

      10.2197/ipsjtcva.6.68

    • 査読あり / オープンアクセス / 謝辞記載あり
  • [雑誌論文] Evaluation of image processing algorithms on vehicle safety system based on free-viewpoint image rendering2014

    • 著者名/発表者名
      Akitaka Oko, Tomokazu Sato, Hideyuki Kume, Takashi Machida, Naokazu Yokoya
    • 雑誌名

      Proc. IEEE Intelligent Vehicles Symposium (IV2014)

      巻: - ページ: 706-711

    • DOI

      10.1109/IVS.2014.6856496

    • 査読あり / 謝辞記載あり
  • [雑誌論文] Free-viewpoint AR human-motion reenactment based on a single RGB-D video stream2014

    • 著者名/発表者名
      Fabian Lorenzo Dayrit, Yuta Nakashima, Tomokazu Sato, Naokazu Yokoya
    • 雑誌名

      Proc. IEEE Int. Conf. on Multimedia and Expo

      巻: - ページ: 1-6

    • DOI

      10.1109/ICME.2014.6890243

    • 査読あり / 謝辞記載あり
  • [学会発表] テクスチャの連続性を考慮した視点依存テクスチャマッピングによる自由視点画像生成2015

    • 著者名/発表者名
      片桐 敬太
    • 学会等名
      電子情報通信学会 パターン認識・メディア理解研究会
    • 発表場所
      慶應義塾大学矢上キャンパス(神奈川県横浜市)
    • 年月日
      2015-03-19 – 2015-03-20
  • [学会発表] 実時間自由視点画像生成を用いた実画像に基づくドライブシミュレータシステム2015

    • 著者名/発表者名
      松元 裕哉
    • 学会等名
      電子情報通信学会 パターン認識・メディア理解研究会
    • 発表場所
      慶應義塾大学矢上キャンパス(神奈川県横浜市)
    • 年月日
      2015-03-19 – 2015-03-20
  • [学会発表] 線分の直線性およびテクスチャの連続性を考慮した画像変形に基づく自由視点画像生成における歪みの抑制2015

    • 著者名/発表者名
      篠本 渉
    • 学会等名
      電子情報通信学会 パターン認識・メディア理解研究会
    • 発表場所
      慶應義塾大学矢上キャンパス(神奈川県横浜市)
    • 年月日
      2015-03-19 – 2015-03-20
  • [学会発表] 三次元形状を利用した自由視点画像生成に基づく画像の高解像度化2014

    • 著者名/発表者名
      林 佑亮
    • 学会等名
      映像情報メディア学会2014年冬季大会
    • 発表場所
      東京理科大学森戸記念館(東京都新宿区)
    • 年月日
      2014-12-17 – 2014-12-18
  • [学会発表] 自由視点画像生成に基づいた移動カメラ映像からのシネマグラフ生成2014

    • 著者名/発表者名
      中島 章敬
    • 学会等名
      映像情報メディア学会2014年冬季大会
    • 発表場所
      東京理科大学森戸記念館(東京都新宿区)
    • 年月日
      2014-12-17 – 2014-12-18
  • [学会発表] 透視投影歪みを自動補正した画像修復2014

    • 著者名/発表者名
      笹尾 海斗
    • 学会等名
      電気関係学会関西連合大会
    • 発表場所
      奈良先端科学技術大学院大学(奈良県生駒市)
    • 年月日
      2014-11-23 – 2014-11-24

URL: 

公開日: 2016-06-03  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi