• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

3D Shape Modeling from Sparse Multi-view Images

Research Project

Project/Area Number 18K11352
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61010:Perceptual information processing-related
Research InstitutionShizuoka University

Principal Investigator

Okabe Makoto  静岡大学, 工学部, 准教授 (40557211)

Project Period (FY) 2018-04-01 – 2021-03-31
Project Status Completed (Fiscal Year 2020)
Budget Amount *help
¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
Fiscal Year 2020: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2019: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2018: ¥2,080,000 (Direct Cost: ¥1,600,000、Indirect Cost: ¥480,000)
KeywordsComputed tomography / 機械学習 / モデリング / レンダリング / CT / テクスチャ合成 / 画像処理 / 画像再構成 / 深層学習 / Computed Tomography(CT) / 3次元形状モデリング / テクスチャ解析&合成 / スケッチベースインタフェース
Outline of Final Research Achievements

We propose a method of three-dimensional (3D) volume modeling from sparse multi-view images (e.g., only a single-view input or a pair of front- and side-view inputs). The volume determined from such sparse inputs using previous methods appears blurry and unnatural with novel views; however, our method preserves the appearance of novel viewing angles by transferring the appearance information from input images to novel viewing angles. For appearance information, we use texture features learned from the input images. We demonstrate our method successfully provides natural-looking volumetric shapes from sparse multi-view input images.

Academic Significance and Societal Importance of the Research Achievements

CTによるボリュームのモデリングには、相当数(通常、数百枚程度)のソノグラム画像(X線写真など)が必要となる。ソノグラム画像の枚数を大幅に減らしても高画質なボリュームをモデリングできる技術を開発することで、1)医療でCTを用いる際、撮影時間を短縮し被写体に与える負担を軽減できる、2)自然現象(煙/炎/液体などの流体、樹木などの植物)のモデリングにCTを用いる際、必要なカメラの台数が減らせる、3)ソノグラム画像が少数なら各画像をユーザが直接編集でき、形状デザインのためのインタラクティブなソフトウェアが開発できる、という3つのメリットがある。

Report

(4 results)
  • 2020 Annual Research Report   Final Research Report ( PDF )
  • 2019 Research-status Report
  • 2018 Research-status Report
  • Research Products

    (22 results)

All 2020 2019 2018

All Journal Article (1 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 1 results) Presentation (21 results) (of which Int'l Joint Research: 2 results,  Invited: 2 results)

  • [Journal Article] Interactive Video Completion2020

    • Author(s)
      Makoto Okabe, Keita Noda, Yoshinori Dobashi, Ken Anjyo
    • Journal Title

      IEEE Computer Graphics and Applications

      Volume: 40 Issue: 1 Pages: 127-139

    • DOI

      10.1109/mcg.2019.2950176

    • Related Report
      2019 Research-status Report
    • Peer Reviewed / Int'l Joint Research
  • [Presentation] 疎な多視点画像からの樹木のボリュームモデリング2020

    • Author(s)
      岡部 誠
    • Organizer
      Visual Computing 2020
    • Related Report
      2020 Annual Research Report
  • [Presentation] SiamMaskを用いた動画修復とマスク生成への応用2020

    • Author(s)
      坪田 颯生, 岡部 誠, 工藤 隆朗, 由良 俊樹, 本間 祐作
    • Organizer
      Visual Computing 2020
    • Related Report
      2020 Annual Research Report
  • [Presentation] Interactive Video Completion with SiamMask2020

    • Author(s)
      Satsuki Tsubota, Makoto Okabe
    • Organizer
      Pacific Graphics 2020
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 物体構造情報を用いた画像の超解像度化2020

    • Author(s)
      笹俣 匡平, 岡部 誠
    • Organizer
      第178回 CGVI研究会
    • Related Report
      2020 Annual Research Report
  • [Presentation] Interactive Video Completion2020

    • Author(s)
      岡部 誠, 野田 啓太, 土橋 宜典, 安生 健一
    • Organizer
      Visual Computing 2020
    • Related Report
      2020 Annual Research Report
    • Invited
  • [Presentation] 監視カメラ映像の異常検出手法の改良2020

    • Author(s)
      渡邉 祐大, 岡部 誠
    • Organizer
      Visual Computing 2020
    • Related Report
      2020 Annual Research Report
  • [Presentation] 光源位置を考慮した画像の合成ソフトウェアの開発2020

    • Author(s)
      三ツ井 慧太郎, 岡部 誠
    • Organizer
      Visual Computing 2020
    • Related Report
      2020 Annual Research Report
  • [Presentation] 対象物をイメージ通りの向きや画角でとるためのドローン制御の研究2020

    • Author(s)
      池上 敏史, 岡部 誠
    • Organizer
      Visual Computing 2020
    • Related Report
      2020 Annual Research Report
  • [Presentation] 一枚の画像による3Dモデル再構成2020

    • Author(s)
      山梨 傑, 岡部 誠
    • Organizer
      Visual Computing 2020
    • Related Report
      2020 Annual Research Report
  • [Presentation] 対象を絞った動画の説明文生成2020

    • Author(s)
      松本 健吾, 岡部 誠
    • Organizer
      Visual Computing 2020
    • Related Report
      2020 Annual Research Report
  • [Presentation] Video analysis and animation synthesis2020

    • Author(s)
      Makoto Okabe
    • Organizer
      3D Vision & Computer Graphics Online Workshop
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] 動画中の異常検出技術の実装と分析2019

    • Author(s)
      岡部 誠
    • Organizer
      第175回 CGVI研究会
    • Related Report
      2019 Research-status Report
  • [Presentation] ディープラーニングを用いた脳波からの運動意図の識別2019

    • Author(s)
      毛島 由裕, 岡部 誠
    • Organizer
      Visual Computing 2019 ポスター発表
    • Related Report
      2019 Research-status Report
  • [Presentation] 学習的画像合成による立体誇張の高度化2019

    • Author(s)
      杉本 達哉, 岡部 誠
    • Organizer
      Visual Computing 2019 ポスター発表
    • Related Report
      2019 Research-status Report
  • [Presentation] ラフスケッチの線画化技術を用いたリアルタイムの線画修正2019

    • Author(s)
      原田 望, 岡部 誠
    • Organizer
      Visual Computing 2019 ポスター発表
    • Related Report
      2019 Research-status Report
  • [Presentation] インタラクティブな動画修復2019

    • Author(s)
      岡部 誠, 野田 啓太, 土橋 宜典, 安生 健一
    • Organizer
      Visual Computing 2019 ポスター発表
    • Related Report
      2019 Research-status Report
  • [Presentation] 単眼カメラからリアルタイムで人の姿勢を推定する手法の姿勢矯正への応用2019

    • Author(s)
      朝倉 康弘, 岡部 誠
    • Organizer
      Visual Computing 2019 ポスター発表
    • Related Report
      2019 Research-status Report
  • [Presentation] ShadowDrawにおける影の表示精度の向上2019

    • Author(s)
      齋藤 颯太, 岡部 誠
    • Organizer
      Visual Computing 2019 ポスター発表
    • Related Report
      2019 Research-status Report
  • [Presentation] 画像の高解像度化技術の改善2019

    • Author(s)
      笹俣 匡平, 岡部 誠
    • Organizer
      Visual Computing 2019 ポスター発表
    • Related Report
      2019 Research-status Report
  • [Presentation] 時間的一貫性を考慮した動画修復手法の高速化2018

    • Author(s)
      野田 啓太, 岡部 誠
    • Organizer
      Visual Computing 2018
    • Related Report
      2018 Research-status Report
  • [Presentation] スタイル変換技術を用いて写真をイラスト化するためのワークフロー2018

    • Author(s)
      杉山 拓海, 朝倉 康弘, 岡部 誠
    • Organizer
      Visual Computing 2018
    • Related Report
      2018 Research-status Report

URL: 

Published: 2018-04-23   Modified: 2022-01-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi