• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2018 Fiscal Year Annual Research Report

ライトフィールドカメラを用いた複合現実感及び隠消現実感に関する研究

Research Project

Project/Area Number 16J05114
Research InstitutionKeio University

Principal Investigator

森 尚平  慶應義塾大学, 理工学部, 特別研究員(PD)

Project Period (FY) 2016-04-22 – 2019-03-31
Keywords複合現実感 / 隠消現実感 / 多視点カメラ / Light Field Rendering / Image-Based Rendering
Outline of Annual Research Achievements

本研究の目的は,実空間に仮想物体を実時間合成する複合現実感 (Mixed Reality; MR) と実空間から実物体を実時間除去する隠消現実感 (Diminished Reality; DR) における,ライトフィールドデータの利用方法の模索,手法の提案,実動作するシステム開発を通した実証である.本年度は,就職先の決定に伴い研究終了時期が早まったため,早期にこれまでの成果を学術論文としてまとめることに注力した.
具体的には,実物体を視覚的に隠蔽・消去・透過する技術であるDRに関する「ライトフィールドの概念に基づく多視点カメラを用いた手法の開発と評価」を行い,国内外の論文誌や会議へと投稿,採択された.主に,ライトフィールドデータに含まれる視覚的に不要なフェンスを除去する技術や医療用教示映像を作成する際に写る医師の頭部や手を透かして見せる応用技術を報告した.そして,MRに関連して,スポーツ分野における競技者の重心位置推定のために多視点カメラを用いた手法を応用した結果を報告した.
上記に加え,留学先にて着手した類似研究,多視点RGB-D画像(カラー画像とカラー画像に位置合わせされた奥行画像の組)シーケンスを用いた画像修復技術(不可視光線情報を周辺領域及び過去の光線情報から推定する手法)の研究も進め,国際会議に採択された.更に,DR/MRにおける研究活動を周辺分野に周知させる目的で昨年度に行った国外での招待講演が評価され,内容を再編集して投稿したOverview論文が国外論文誌へと採録された.また,拡張現実感,コンピュータビジョンと機械学に関する英書を習周辺分野の研究者たちと協力して翻訳した訳本を2冊出版した.

Research Progress Status

平成30年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

平成30年度が最終年度であるため、記入しない。

  • Research Products

    (12 results)

All 2019 2018 Other

All Int'l Joint Research (1 results) Journal Article (3 results) (of which Int'l Joint Research: 3 results,  Peer Reviewed: 3 results,  Open Access: 3 results) Presentation (5 results) (of which Int'l Joint Research: 4 results) Book (2 results) Remarks (1 results)

  • [Int'l Joint Research] ICG, Graz University of Technology(オーストリア)

    • Country Name
      AUSTRIA
    • Counterpart Institution
      ICG, Graz University of Technology
  • [Journal Article] Removing fences from sweep motion videos using global 3D reconstruction and fence-aware light field rendering2018

    • Author(s)
      Lueangwattana Chanya, Mori Shohei, and Saito Hideo
    • Journal Title

      Computational Visual Media

      Volume: 5 Pages: 1 - 12

    • DOI

      10.1007/s41095-018-0126-8

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] An overview of augmented visualization: observing the real world as desired2018

    • Author(s)
      Mori Shohei and Saito Hideo
    • Journal Title

      APSIPA Transactions on Signal and Information Processing

      Volume: 7 Pages: 1 - 9

    • DOI

      10.1017/ATSIP.2018.13

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Superimposing Thermal-Infrared Data on 3D Structure Reconstructed by RGB Visual Odometry2018

    • Author(s)
      Masahiro Yamaguchi, Trong-Phuc Truong, Shohei Mori, Vincent Nozick, Hideo Saito, Shoji Yachida, and Hideaki Sato
    • Journal Title

      IEICE Transactions on Information and Systems

      Volume: E101.D Pages: 1296 - 1307

    • DOI

      10.1587/transinf.2017MVP0023

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] マルチカメラ搭載型無影灯を使用した手術動画を利用した作業領域のDR表示2019

    • Author(s)
      前澤桃子,大石圭,森尚平,斎藤英雄,梶田大樹,高詰佳史
    • Organizer
      研究報告コンピュータビジョンとイメージメディア
  • [Presentation] Perceived Weight of a Rod under Augmented and Diminished Reality Visual Effects2018

    • Author(s)
      Satoshi Hashiguchi, Shohei Mori, Miho Tanaka, Fumihisa Shibata, and Asako Kimura
    • Organizer
      The ACM Symp. on Virtual Reality Software and Technology
    • Int'l Joint Research
  • [Presentation] Diminishing Fence from Sweep Image Sequences Using Structure from Motion and Light Field Rendering2018

    • Author(s)
      Chanya Lueangwattana, Shohei Mori, and Hideo Saito
    • Organizer
      Asia Pacific Workshop on Mixed and Augmented Reality
    • Int'l Joint Research
  • [Presentation] 3D PixMix: Image Inpainting in 3D Environment2018

    • Author(s)
      Shohei Mori, Jan Herling, Wolfgang Broll, Norihiko Kawai, Hideo Saito, Dieter Schmalstieg, and Denis Kalkofen
    • Organizer
      IEEE Int. Symp. on Mixed and Augmented Reality (ISMAR)-Adjunct
    • Int'l Joint Research
  • [Presentation] Estimation of Center of Mass for Sports Scene Using Weighted Visual Hull2018

    • Author(s)
      Tomoya Kaichi, Shohei Mori, Hideo Saito, Kosuke Takahashi, Dan Mikami, Mariko Isogawa, and Hideaki Kimata
    • Organizer
      IEEE Conf. on Computer Vision and Pattern Recognition Workshops
    • Int'l Joint Research
  • [Book] ARの教科書2018

    • Author(s)
      (著)Dieter Schmalstieg,Tobias Hollerer,(編)池田聖,酒田信親,山本豪志朗,(訳)池田聖,一刈良介,大槻麻衣,河合紀彦,酒田信親,武富貴史,藤本雄一郎,森尚平,山本豪志朗
    • Total Pages
      528
    • Publisher
      マイナビ出版
    • ISBN
      978-4-8399-6536-5
  • [Book] OpenCVとPythonによる機械学習プログラミング2018

    • Author(s)
      (著)Michael Beyeler,(訳)池田聖,浦西友樹,中島悠太,森尚平,山添大丈,山本豪志朗
    • Total Pages
      352
    • Publisher
      マイナビ出版
    • ISBN
      978-4-8399-6530-3
  • [Remarks] 自身の研究成果をまとめたWebサイト

    • URL

      https://mugichoko445.bitbucket.io/

URL: 

Published: 2019-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi