• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

A Study on Sustainable Four Dimensional AR Environment

Research Project

Project/Area Number 16H02858
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeSingle-year Grants
Section一般
Research Field Human interface and interaction
Research InstitutionOsaka University

Principal Investigator

Takemura Haruo  大阪大学, サイバーメディアセンター, 教授 (60263430)

Co-Investigator(Kenkyū-buntansha) 間下 以大  大阪大学, サイバーメディアセンター, 准教授 (00467606)
浦西 友樹  大阪大学, サイバーメディアセンター, 准教授 (00533738)
黒田 嘉宏  大阪大学, 基礎工学研究科, 准教授 (30402837)
ラサミー ポチャラ  大阪大学, サイバーメディアセンター, 助教 (50772448)
清川 清  奈良先端科学技術大学院大学, 先端科学技術研究科, 教授 (60358869)
Project Period (FY) 2016-04-01 – 2019-03-31
Project Status Completed (Fiscal Year 2018)
Budget Amount *help
¥12,350,000 (Direct Cost: ¥9,500,000、Indirect Cost: ¥2,850,000)
Fiscal Year 2018: ¥2,860,000 (Direct Cost: ¥2,200,000、Indirect Cost: ¥660,000)
Fiscal Year 2017: ¥2,990,000 (Direct Cost: ¥2,300,000、Indirect Cost: ¥690,000)
Fiscal Year 2016: ¥6,500,000 (Direct Cost: ¥5,000,000、Indirect Cost: ¥1,500,000)
Keywordsヒューマンコンピュータインタラクション / 三次元計測 / 拡張現実 / 機械学習 / コンピュータビジョン / コンピュータグラフィックス / バーチャルリアリティ / 環境計測 / シミュレーテョン / シミュレーション / 拡張現実感 / ユーザインタフェース / ヒューマンインタフェース
Outline of Final Research Achievements

This research focused on the development of the key technology to implement a four-dimensional AR environment where a user can interact controlled the timeline in the AR environment. This can be possible by reconstruction of the real environment along with the precise simulation of the physical phenomena in the real environment. The research results include the User Interface for 4DAR, Photometric reconstruction of the 3D environment, etc.

Academic Significance and Societal Importance of the Research Achievements

本研究成果は,これまで限定的であったAR の対象空間を4 次元空間へと拡張し,そのAR 空間を維持するために持続的な計測を可能とする.なかでも,単に記録再生するだけでなく,精密な観測に基づくモデル化とシミュレーションによる精度の高い「内挿」および「外挿」をすることで,時間軸方向の実環境の変化を自在に見せることの可能性を示した。
この技術をさらに発展させれば、一定期間実環境を精密に観測するだけで建立当時の寺院の様子を再現したり,公園の木々の様子の将来像を提示したりでき、このような全く新しいAR が実現できれば,in-situ での現象の深い理解,診断,検査,エンタテインメント等に応用できる.

Report

(4 results)
  • 2018 Annual Research Report   Final Research Report ( PDF )
  • 2017 Annual Research Report
  • 2016 Annual Research Report
  • Research Products

    (27 results)

All 2019 2018 2017 2016 Other

All Int'l Joint Research (1 results) Journal Article (6 results) (of which Int'l Joint Research: 3 results,  Peer Reviewed: 4 results) Presentation (20 results) (of which Int'l Joint Research: 8 results,  Invited: 3 results)

  • [Int'l Joint Research] University of California, Santa Barbara(米国)

    • Related Report
      2016 Annual Research Report
  • [Journal Article] Light Attenuation Display: Subtractive See-Through Near-Eye Display via Spatial Color Filtering2019

    • Author(s)
      Itoh Yuta、Langlotz Tobias、Iwai Daisuke、Kiyokawa Kiyoshi、Amano Toshiyuki
    • Journal Title

      IEEE Transactions on Visualization and Computer Graphics

      Volume: 25 Issue: 5 Pages: 1951-1960

    • DOI

      10.1109/tvcg.2019.2899229

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] AR用ヘッドマウントディスプレイの動向と視覚拡張への応用2019

    • Author(s)
      清川 清
    • Journal Title

      電子情報通信学会 和文論文誌C

      Volume: J102-C Pages: 170-178

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed
  • [Journal Article] The Influence of Label Design on Search Performance and Noticeability in Wide Field of View Augmented Reality Displays2018

    • Author(s)
      Kruijff Ernst、Orlosky Jason、Kishishita Naohiro、Trepkowski Christina、Kiyokawa Kiyoshi
    • Journal Title

      IEEE Transactions on Visualization and Computer Graphics

      Volume: - Issue: 9 Pages: 1-1

    • DOI

      10.1109/tvcg.2018.2854737

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Camera Localization under a Variable Lighting Environment using Parametric Feature Database based on Lighting Simulation2017

    • Author(s)
      Tomohiro Mashita, Alexander Plopski, Akira Kudo, Tobias Hollerer, Kiyoshi Kiyokawa, and Haruo Takemura
    • Journal Title

      Transactions of the Virtual Reality Society of Japan

      Volume: 22 Pages: 177-187

    • NAID

      130005701306

    • Related Report
      2017 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Camera Localization under a Variable Lighting Environment using Parametric Feature Database based on Lighting Simulation2017

    • Author(s)
      Tomohiro Mashita, Alexander Plopski, Akira Kudo, Tobias Hollerer, Kiyoshi Kiyokawa, Haruo Takemura
    • Journal Title

      Transactions of the Virtual Reality Society of Japan

      Volume: -

    • NAID

      130005701306

    • Related Report
      2016 Annual Research Report
  • [Journal Article] 補助視点推薦機能を有するAR家具配置システム2017

    • Author(s)
      森 磨美, 間下 以大, 黒田 嘉宏, 清川 清, 竹村 治雄
    • Journal Title

      バーチャルリアリティ学会論文誌

      Volume: -

    • NAID

      130005701308

    • Related Report
      2016 Annual Research Report
  • [Presentation] Illumination invariant camera localization using synthetic images2018

    • Author(s)
      Sota Shoman, Tomohiro Mashita, Alexander Plopski, Photchara Ratsamee, Yuki Uranishi, and Haruo Takemura
    • Organizer
      17TH IEEE INTERNATIONAL SYMPOSIUM ON MIXED AND AUGMENTED REALITY
    • Related Report
      2018 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Image Processing for Personalized Reality2018

    • Author(s)
      Kiyoshi Kiyokawa
    • Organizer
      4th International Workshop on Image Sensors and Imaging Systems (IWISS)2018
    • Related Report
      2018 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] To See, Or Not To See That is The Question2018

    • Author(s)
      Kiyoshi Kiyokawa
    • Organizer
      ISS'18 International Workshop on Computational Augmented Reality Displays (CARD)
    • Related Report
      2018 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] From Augmented Reality to Personalized Reality2018

    • Author(s)
      Kiyoshi Kiyokawa
    • Organizer
      Cyberworlds 2018
    • Related Report
      2018 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] 断続的に撮影された点群間の位置合わせ2018

    • Author(s)
      田又 健士朗, 間下 以大, 浦西 友樹, ラサミー ポチャラ, 竹村 治雄
    • Organizer
      情報処理学会研究報告, Vol. 2018-CVIM-212, No. 30
    • Related Report
      2018 Annual Research Report
  • [Presentation] 透明感操作のためのcGANsによる集光模様の実時間生成2018

    • Author(s)
      岡本 拓朗,浦西 友樹,間下 以大,Photchara Ratsamee,竹村 治雄
    • Organizer
      第56回 日本バーチャルリアリティ学会 複合現実感研究会
    • Related Report
      2018 Annual Research Report
  • [Presentation] 構造色パターンから光源方向を推定可能なARマーカ2018

    • Author(s)
      伊藤 澄美,浦西 友樹,Photchara Ratsamee,間下 以大,竹村 治雄
    • Organizer
      第56回 日本バーチャルリアリティ学会 複合現実感研究会
    • Related Report
      2018 Annual Research Report
  • [Presentation] A Mutual Motion Capture System for Face-to-face Collaboration2017

    • Author(s)
      Atsuyuki Nakamura, Kiyoshi Kiyokawa, Photchara Ratsamee, Tomohiro Mashita, Yuki Uranishi, and Haruo Takemura
    • Organizer
      A Mutual Motion Capture System for Face-to-face Collaboration
    • Related Report
      2017 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Realtime Generation of Caustic Images Using a Deep Neural Network,2017

    • Author(s)
      Takurou Okamoto, Yuki Uranishi, Tomohiro Mashita, Photchara Ratsamee, Kiyoshi Kiyokawa, Haruo Takemura
    • Organizer
      the 16th IEEE International Symposium on Mixed and Augmented Reality (ISMAR)
    • Related Report
      2017 Annual Research Report
    • Int'l Joint Research
  • [Presentation] An Interactive 4D Visualization of Dynamic 3D Information,2017

    • Author(s)
      Tao Tao, Photchara Ratsamee, Yuki Uranishi, Kiyoshi Kiyokawa, Tomohiro Mashita, Haruo Takemura
    • Organizer
      第22回 バーチャルリアリティ学会大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] シミュレーションと自己符号化器を用いた光源変化に頑健なカメラ位置姿勢推定2017

    • Author(s)
      正満 創太, 間下 以大, Photchara Ratsamee, 浦西 友樹, 清川 清, 竹村 治雄
    • Organizer
      画像の認識理解シンポジウム(MIRU 2017)
    • Related Report
      2017 Annual Research Report
  • [Presentation] 深層学習による集光模様の実時間生成2017

    • Author(s)
      岡本 拓朗, 浦西 友樹, 間下 以大, ラサミー ポチャラ, 清川 清, 竹村 治雄
    • Organizer
      画像の認識・理解シンポジウム(MIRU2017)
    • Related Report
      2017 Annual Research Report
  • [Presentation] 対面協調作業に適した相互モーションキャプチャシステムの開発2017

    • Author(s)
      中村 淳之, 清川 清, Photchara Ratsamee, 間下 以大, 浦西 友樹, 竹村 治雄
    • Organizer
      第143回ヒューマンインタフェース学会研究会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 深層学習による集光模様の実時間生成2017

    • Author(s)
      岡本 拓朗, 浦西 友樹, 間下 以大, ラサミー ポチャラ, 清川 清, 竹村 治雄,
    • Organizer
      情報処理学会CVIM研究会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 光源変化シミュレーションと深層学習による特徴量変換を用いたカメラ位置姿勢推定2017

    • Author(s)
      正満 創太, 間下 以大, ラサミー ポチャラ, 浦西 友樹, 清川 清, 竹村 治雄
    • Organizer
      情報処理学会CVIM研究会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 大域照明の内挿による光源操作可能なARシステム2017

    • Author(s)
      井手 絢香, 間下 以大, 清川 清, 浦西 友樹, Photchara Ratsamee, 竹村 治雄
    • Organizer
      情報処理学会CVIM研究会
    • Related Report
      2017 Annual Research Report
  • [Presentation] Simulation based Camera Localization under a Variable Lighting Environment2016

    • Author(s)
      Tomohiro Mashita, Alexander Plopski, Akira Kudo, Tobias Hoellerer, Kiyoshi Kiyokawa, Haruo Takemura
    • Organizer
      ICAT-EGVE
    • Place of Presentation
      Arkasas(USA)
    • Year and Date
      2016-12-07
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 投影型拡張現実によるパッキング支援システム2016

    • Author(s)
      テチャサラトーン ナタオン、ラサミー ポチャラ、間下 以大、浦西 友樹、清川  清、竹村 治雄
    • Organizer
      第50回 複合現実感研究会, MR2016-12
    • Place of Presentation
      支笏湖丸駒温泉(北海道・千歳市)
    • Year and Date
      2016-10-13
    • Related Report
      2016 Annual Research Report
  • [Presentation] Improving Localization under Varying Illumination2016

    • Author(s)
      Alexander Plopski, Tomohiro Mashita, Akira Kudo, Tobias Hoellerer, Kiyoshi Kiyokawa, Haruo Takemura
    • Organizer
      IEEE International Symposium on Mixed and Augmented Reality (ISMAR2016)
    • Place of Presentation
      Merida(Mexico)
    • Year and Date
      2016-09-19
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 屋外拡張現実における自己位置推定のためのマハラノビス距離を用いた特徴点マッチング手法2016

    • Author(s)
      間下 以大, Plopski Alexander, 工藤 彰, Hollerer Tobias, 清川 清, 竹村 治雄
    • Organizer
      第19回画像の認識・理解シンポジウム(MIRU2016)
    • Place of Presentation
      アクトシティ浜松(静岡県・浜松市)
    • Year and Date
      2016-08-01
    • Related Report
      2016 Annual Research Report

URL: 

Published: 2016-04-21   Modified: 2022-01-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi