• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

人間の創造的プロセスを促進する設計支援技術

研究課題

研究課題/領域番号 21F20075
研究種目

特別研究員奨励費

配分区分補助金
応募区分外国
審査区分 小区分61020:ヒューマンインタフェースおよびインタラクション関連
研究機関東京大学

研究代表者

五十嵐 健夫  東京大学, 大学院情報理工学系研究科, 教授 (80345123)

研究分担者 SHEN I-CHAO  東京大学, 情報理工学(系)研究科, 外国人特別研究員
研究期間 (年度) 2021-04-28 – 2023-03-31
研究課題ステータス 完了 (2022年度)
配分額 *注記
2,300千円 (直接経費: 2,300千円)
2022年度: 1,100千円 (直接経費: 1,100千円)
2021年度: 1,200千円 (直接経費: 1,200千円)
キーワードコンピューターグラフィックス / 機械学習 / コンピュータグラフィックス / 設計支援アルゴリズム
研究開始時の研究の概要

Our research aims to solve the problem of inverse polygonal modeling, which generates a semantically-meaningful editing history given several image-based observations. We will analyze the types of editing operations used in the polygonal modeling process, and focus on designing a scoring model to infer the most likely topological operations that lead to the target image-based observations. At the same time, we also need to design a data generation process that generates useful training data for our scoring model.

研究実績の概要

In the past year, I have worked on seven projects and had four papers accepted.
The main theme of these projects is (1) to increase the ability of the generative model by providing user inputs and (2) to assist users in creating ML algorithms. These projects are relevant to edit nerf model and capturing nerf model, image-based shape part manipulation, indoor scene reconstruction from 360 images, and layout generation for graphic design.
In more detail, I introduce the first framework that enables users to remove unwanted objects or retouch undesired regions in a 3D scene represented by a pre-trained NeRF without any category-specific data and training. On the other hand, I proposed a novel containment-aware loss function for layout generation.

現在までの達成度 (段落)

令和4年度が最終年度であるため、記入しない。

今後の研究の推進方策

令和4年度が最終年度であるため、記入しない。

報告書

(2件)
  • 2022 実績報告書
  • 2021 実績報告書
  • 研究成果

    (12件)

すべて 2023 2022 2021 その他

すべて 雑誌論文 (4件) (うち国際共著 4件、 査読あり 4件、 オープンアクセス 1件) 学会発表 (2件) (うち国際学会 2件) 備考 (6件)

  • [雑誌論文] 360MVSNet: Deep Multi-view Stereo Network with 360° Images for Indoor Scene Reconstruction2023

    • 著者名/発表者名
      Chiu Ching-Ya、Wu Yu-Ting、Shen I-Chao、Chuang Yung-Yu
    • 雑誌名

      WACV

      巻: 0 ページ: 0-0

    • DOI

      10.1109/wacv56688.2023.00307

    • 関連する報告書
      2022 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] StyleFaceUV: a 3D Face UV Map Generator for View-Consistent Face Image Synthesis2023

    • 著者名/発表者名
      Wei-Chieh Chung, Jian-Kai Zhu, I-Chao Shen, Yu-Ting Wu, Yung-Yu Chuang
    • 雑誌名

      BMVC

      巻: 0 ページ: 0-0

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] ClipGen: A Deep Generative Model for Clipart Vectorization and Synthesis2022

    • 著者名/発表者名
      Shen I-Chao、Chen Bing-Yu
    • 雑誌名

      IEEE Transactions on Visualization and Computer Graphics

      巻: 28 号: 12 ページ: 4211-4224

    • DOI

      10.1109/tvcg.2021.3084944

    • 関連する報告書
      2022 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] Data-driven Sketch Beautification with Neural Feature Representation2021

    • 著者名/発表者名
      Shen I-Chao
    • 雑誌名

      IEEE Computer Graphics and Applications

      巻: 1 号: 4 ページ: 1-1

    • DOI

      10.1109/mcg.2021.3115181

    • 関連する報告書
      2021 実績報告書
    • 査読あり / 国際共著
  • [学会発表] ODEN: Live Programming for Neural Network Architecture Editing2022

    • 著者名/発表者名
      Chunqi Zhao, I-Chao Shen, Tsukasa Fukusato, Jun Kato, Takeo Igarashi
    • 学会等名
      26th International Conference on Intelligent User Interfaces (IUI 2022)
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Per Garment Capture and Synthesis for Real-time Virtual Try-on2021

    • 著者名/発表者名
      Toby Chong, I-Chao Shen, Nobuyuki Umetani, Takeo Igarashi
    • 学会等名
      User Interface Software and Technology (UIST) 2021
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [備考] StyleFaceUV

    • URL

      https://jdily.github.io/proj_site/stylefaceuv_proj.html

    • 関連する報告書
      2022 実績報告書
  • [備考] 360MVSNet

    • URL

      https://jdily.github.io/proj_site/360mvsnet_proj.html

    • 関連する報告書
      2022 実績報告書
  • [備考] ClipGen

    • URL

      https://jdily.github.io/proj_site/clipgen_proj.html

    • 関連する報告書
      2022 実績報告書
  • [備考] リアルタイムバーチャル試着のための衣服ごとのキャプチャと合成

    • URL

      https://sites.google.com/view/deepmannequin

    • 関連する報告書
      2021 実績報告書
  • [備考] 神経特徴量表現を用いたデータ駆動型スケッチ美化手法

    • URL

      https://jdily.github.io/proj_site/ddsb_proj.html

    • 関連する報告書
      2021 実績報告書
  • [備考] ODEN: ニューラルネットワークアーキテクチャ編集のためのライブプログラミング

    • URL

      https://haremi.xyz/projects/oden/oden.html

    • 関連する報告書
      2021 実績報告書

URL: 

公開日: 2021-05-27   更新日: 2024-03-26  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi