• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2011 Fiscal Year Annual Research Report

実環境のセンシングに基づく時空を越えた複合現実型情報提示

Research Project

Project/Area Number 23240024
Research Category

Grant-in-Aid for Scientific Research (A)

Research InstitutionNara Institute of Science and Technology

Principal Investigator

横矢 直和  奈良先端科学技術大学院大学, 情報科学研究科, 教授 (10252834)

Co-Investigator(Kenkyū-buntansha) 神原 誠之  奈良先端科学技術大学院大学, 情報科学研究科, 准教授 (10346306)
佐藤 智和  奈良先端科学技術大学院大学, 情報科学研究科, 准教授 (50362835)
池田 聖  大阪大学, 大学院・基礎工学研究科, 助教 (40432596)
Keywords複合現実感 / センシング / 拡張現実感 / テレプレゼンス / コンピュータビジョン
Research Abstract

1.ユーザを含む実環境のセンシング
全方位カメラとGPSを搭載した車両と飛行船を用いて地上撮影と空撮を実施するとともに、GPS測位の信頼度情報を考慮したGPS測位とstructure-from-motion技法を併用した撮影時のカメラ位置・姿勢推定の高精度化を実現した。この中で、空撮に関しては、全天球ハイダイナミックレンジ画像の取得を可能にした。また、ランドマークデータベースを用いたユーザ視点画像からのユーザの位置・姿勢推定の高速化・安定化手法を開発した。さらに、次年度における東大寺をフィールドとした実証実験に向けて空撮経路の設計を行った。
2.過去・現在に渡る拡張テレプレゼンス
遠隔地の映像に仮想物体を重畳合成して臨場感豊かに提示する新しい概念として提案している「拡張テレプレゼンス」の具現化に着手し、まず実験環境を構築した。次に、空撮全方位ハイダイナミックレンジ画像を環境マップとして用いることにより、飛行船からの空撮全方位映像と重畳合成する仮想物体の間の陰影・色調等の光学的整合性問題の解決を図った。さらに、空撮全方位映像からの3次元復元に基づく自由視線画像生成による高臨場感拡張テレプレゼンスシステムの初期モデルを設計し、試作に着手した。
3、過去・現在に渡る拡張現実感
従来から開発しているランドマークと特徴点の照合による拡張現実感のための幾何的位置合わせと全方位映像を用いた光源環境推定を統合することによって、幾何的整合性と光学的整合性を同時に満たす拡張現実感画像生成法を開発した。また、東大寺をフィールドとする「バーチャル歴史体験」のシナリオによるモバイル拡張現実感システムの初期モデルを設計した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

当初設定した3つの研究項目について研究の技術面での進捗は順調であり、全天球ハイダイナミックレンジ画像生成、ランドマークデータベースを用いたカメラの位置・姿勢推定等で成果を得ている。また、実証実験フィールドに関して、当初予定していた国営飛鳥・平城宮跡歴史公園に加えて、東大寺の協力により、東大寺境内全域を対象とした実験フィールドを確保した。

Strategy for Future Research Activity

本研究は、拡張現実感および拡張テレプレゼンスの実環境での実証に重点が置かれており、今後は東大寺をフィールドとしたストーリー性を重視した「観光AR」コンテンツの開発と東大寺境内での一般観光客が参加する利用実験を通した実証研究を加速する。また、バーチャル歴史体験に必要な歴史コンテンツの電子化のために東大寺との実質的な共同研究体制を構築する。

  • Research Products

    (33 results)

All 2012 2011 Other

All Journal Article (8 results) (of which Peer Reviewed: 7 results) Presentation (24 results) Remarks (1 results)

  • [Journal Article] Tone mapping for HDR images with dimidiate luminance and spatial distributions of bright and dark regions2012

    • Author(s)
      Masaki Kitaura
    • Journal Title

      Proc.SPIE

      Volume: Vol.8292 Pages: 829205-1-829205-11

    • Peer Reviewed
  • [Journal Article] 無人飛行船からの空撮全方位動画像を用いた蓄積再生型拡張テレプレゼンス2011

    • Author(s)
      大倉史生
    • Journal Title

      日本バーチャルリアリティ学会論文誌

      Volume: Vol.12 Pages: 127-138

    • Peer Reviewed
  • [Journal Article] 低自由度モーションベースと没入型ディスプレイを用いた慣性力の再現によるテレプレゼンスシステムの構築2011

    • Author(s)
      堀磨伊也
    • Journal Title

      日本バーチャルリアリティ学会論文誌

      Volume: Vol.12 Pages: 283-292

    • Peer Reviewed
  • [Journal Article] Real-time and accurate extrinsic camera parameter estimation using feature landmark database for augmented reality2011

    • Author(s)
      Takafumi Taketomi
    • Journal Title

      Computers and Graphics

      Volume: Vol.35 Pages: 768-777

    • Peer Reviewed
  • [Journal Article] Surface completion of shape and texture based on energy minimization2011

    • Author(s)
      Norihiko Kawai
    • Journal Title

      Proc.2011 IEEE Int.Conf.on Image Processing (ICIP2011)

      Pages: 913-916

    • Peer Reviewed
  • [Journal Article] 拡張現実感を用いたマルチメディア付箋システム2011

    • Author(s)
      山澤一誠
    • Journal Title

      電子情報通信学会論文誌(D)

      Volume: Vol.J94-D Pages: 1561-1569

    • Peer Reviewed
  • [Journal Article] 時空を越える拡張テレプレゼンス~フライスルーMR平城京~2011

    • Author(s)
      横矢直和
    • Journal Title

      JACIC情報

      Volume: Vol.26 Pages: 62-67

  • [Journal Article] Eipolar geometry estimation for wide-baseline omnidirectional street view images2011

    • Author(s)
      Tomokazu Sato
    • Journal Title

      Proc.2nd IEEE Int.Workshop on Mobile Vision (IWMV2011)

      Pages: 56-63

    • Peer Reviewed
  • [Presentation] ワイドベースライン全方位ストリートビュー画像に対するエピポーラ幾何推定2012

    • Author(s)
      佐藤智和
    • Organizer
      情報処理学会コンピュータビジョンとイメージメディア研究会
    • Place of Presentation
      東京工業大学(目黒区)
    • Year and Date
      2012-03-15
  • [Presentation] IBRテレプレゼンスのための提示映像評価に基づく画像獲得手法2012

    • Author(s)
      田中佳樹
    • Organizer
      電子情報通信学会マルチメディア・仮想環境基礎研究会
    • Place of Presentation
      富山大学(富山市)
    • Year and Date
      2012-03-13
  • [Presentation] 拡張現実感における画像修復に基づく陰影を考慮したマーカの除去2012

    • Author(s)
      山崎将由
    • Organizer
      映像情報メディア学会映像表現&コンピュータグラフィックス研究会
    • Place of Presentation
      北海道大学(札幌市)
    • Year and Date
      2012-02-20
  • [Presentation] 無人飛行船に搭載された2台の全方位カメラを用いた不可視領域のない全天球HDR画像の生成2012

    • Author(s)
      大倉史生
    • Organizer
      電子情報通信学会マルチメディア・仮想環境基礎研究会
    • Place of Presentation
      大阪電気通信大学(寝屋川市)
    • Year and Date
      2012-01-20
  • [Presentation] 航空写真を事前知識として用いた地上撮影画像からのカメラの位置・姿勢推定2012

    • Author(s)
      関井大気
    • Organizer
      情報処理学会コンピュータビジョンとイメージメディア研究会
    • Place of Presentation
      大阪電気通信大学(寝屋川市)
    • Year and Date
      2012-01-19
  • [Presentation] 中空透明球体上の鏡面反射光を用いた近接光源位置の推定2012

    • Author(s)
      青砥隆仁
    • Organizer
      情報処理学会コンピュータビジョンとイメージメディア研究会
    • Place of Presentation
      大阪電気通信大学(寝屋川市)
    • Year and Date
      2012-01-19
  • [Presentation] 明度分布と空間的分布が二分されるHDR画像のためのトーンマッピング2012

    • Author(s)
      北浦真樹
    • Organizer
      電子情報通信学会マルチメディア・仮想環境基礎研究会
    • Place of Presentation
      大阪電気通信大学(寝屋川市)
    • Year and Date
      2012-01-19
  • [Presentation] Epipolar geometry estimation for wide-baseline omnidirectional images using scale and orientation constraints of texture pattern2012

    • Author(s)
      Tomokazu Sato
    • Organizer
      3rd AFCV Int.Workshop on Recent Trends in Computer Vision
    • Place of Presentation
      大阪大学(茨木市)(招待講演)
    • Year and Date
      2012-01-11
  • [Presentation] 環境の変化に頑健なカメラ位置・姿勢推定のためのオンラインでのランドマークデータベース構築2011

    • Author(s)
      岡田圭太
    • Organizer
      2011年映像情報メディア学会冬季大会
    • Place of Presentation
      芝浦工業大学(江東区)
    • Year and Date
      2011-12-22
  • [Presentation] 航空写真上の高度が未知のランドマークを用いたPnP問題の解決による地上カメラの位置・姿勢推定2011

    • Author(s)
      関井大気
    • Organizer
      電気関係学会関西支部連合大会
    • Place of Presentation
      兵庫県立大学(姫路市)
    • Year and Date
      2011-10-30
  • [Presentation] IBRを用いたテレプレゼンスのための提示映像評価に基づく画像撮影手法2011

    • Author(s)
      田中佳樹
    • Organizer
      日本バーチャルリアリティ学会第16回大会
    • Place of Presentation
      公立はこだて未来大学(函館市)
    • Year and Date
      2011-09-22
  • [Presentation] 中空透明球体を用いた近接光源位置の推定2011

    • Author(s)
      青砥隆仁
    • Organizer
      日本バーチャルリアリティ学会第16回大会
    • Place of Presentation
      公立はこだて未来大学(函館市)
    • Year and Date
      2011-09-20
  • [Presentation] ホモグラフィーを用いた画像修復に基づく拡張現実感におけるマーカの除去2011

    • Author(s)
      山崎将由
    • Organizer
      日本バーチャルリアリティ学会第16回大会
    • Place of Presentation
      公立はこだて未来大学(函館市)
    • Year and Date
      2011-09-20
  • [Presentation] Mixed reality over space and time2011

    • Author(s)
      Naokazu Yokoya
    • Organizer
      China-Japan Symposium on Visual Computing 2011
    • Place of Presentation
      湖南大学(中国・長沙市)(招待講演)
    • Year and Date
      2011-09-17
  • [Presentation] 2台の全方位カメラを用いた不可視領域のない空撮全天球HDR画像の生成2011

    • Author(s)
      大倉史生
    • Organizer
      第10回情報科学技術フォーラム(FIT2011)
    • Place of Presentation
      函館大学(函館市)
    • Year and Date
      2011-09-09
  • [Presentation] 明度が二分されるHDR画像のためのトーンマッピング2011

    • Author(s)
      北浦真樹
    • Organizer
      第10回情報科学技術フォーラム(FIT2011)
    • Place of Presentation
      函館大学(函館市)
    • Year and Date
      2011-09-07
  • [Presentation] Fly-through Heijo Palace Site : Augmented telepresence using aerial omnidirectional videos2011

    • Author(s)
      Fumio Okura
    • Organizer
      ACM SIGGRAPH2011
    • Place of Presentation
      バンクーバーコンベンションセンター(カナダ・バンクーバー市)
    • Year and Date
      2011-08-10
  • [Presentation] パノラマビューシステムのための死角領域修復とプライバシー保護を行った全天球画像生成2011

    • Author(s)
      堀磨伊也
    • Organizer
      画像の認識・理解シンポジウム(MIRU2011)
    • Place of Presentation
      金沢市文化ホール(金沢市)
    • Year and Date
      2011-07-22
  • [Presentation] テクスチャの幾何学的変換と類似パターン位置を考慮したエネルギー最小化による画像修復2011

    • Author(s)
      河合紀彦
    • Organizer
      画像の認識・理解シンポジウム(MIRU2011)
    • Place of Presentation
      金沢市文化ホール(金沢市)
    • Year and Date
      2011-07-22
  • [Presentation] 三次元点群への局所平面当てはめに基づく法線情報付きランドマークデータベースを用いたカメラ位置・姿勢推定2011

    • Author(s)
      武富貴史
    • Organizer
      画像の認識・理解シンポジウム(MIRU2011)
    • Place of Presentation
      金沢市文化ホール(金沢市)
    • Year and Date
      2011-07-22
  • [Presentation] 空撮全方位動画像を用いた蓄積再生型拡張テレプレゼンスにおける幾何学的・光学的整合性の実現2011

    • Author(s)
      大倉史生
    • Organizer
      画像の認識・理解シンポジウム(MIRU2011)
    • Place of Presentation
      金沢市文化ホール(金沢市)
    • Year and Date
      2011-07-22
  • [Presentation] 形状とテクスチャの相関を考慮した類似度に基づくエネルギーの最小化による三次元欠損修復2011

    • Author(s)
      河合紀彦
    • Organizer
      画像の認識・理解シンポジウム(MIRU2011)
    • Place of Presentation
      金沢市文化ホール(金沢市)
    • Year and Date
      2011-07-22
  • [Presentation] 位置の連続性を考慮したバンドル調整による動画像とGPSからのカメラ位置・姿勢推定2011

    • Author(s)
      粂秀行
    • Organizer
      画像の認識・理解シンポジウム(MIRU2011)
    • Place of Presentation
      金沢市文化ホール(金沢市)
    • Year and Date
      2011-07-21
  • [Presentation] Fast and accurate geometric registration based on feature landmark database for augmented reality2011

    • Author(s)
      武富貴史
    • Organizer
      情報処理学会コンピュータビジョンとイメージメディア研究会
    • Place of Presentation
      大阪大学(茨木市)
    • Year and Date
      2011-05-20
  • [Remarks]

    • URL

      http://yokoya.naist.jp/index-j.html

URL: 

Published: 2013-06-26  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi