• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

精緻で豊かな計算機視覚の実現に向けた認識と復元の統合

Research Project

Project/Area Number 17K20143
Research Category

Fund for the Promotion of Joint International Research (Home-Returning Researcher Development Research)

Allocation TypeMulti-year Fund
Review Section Science and Engineering
Research InstitutionKyoto University

Principal Investigator

西野 恒  京都大学, 情報学研究科, 教授

Project Period (FY) 2018 – 2020
Project Status Discontinued (Fiscal Year 2020)
Budget Amount *help
¥56,940,000 (Direct Cost: ¥43,800,000、Indirect Cost: ¥13,140,000)
Keywordsコンピュータビジョン / 知能情報処理 / 視覚情報処理
Outline of Annual Research Achievements

人間の高次視覚は、見ているものを認識し、その物理的構成等を復元するという二つの重要な機能を備えており、これらの機能が密接に連携することにより、豊かな視覚知能を実現している。一方、コンピュータビジョンにおいて実世界の認識と復元は、互いに独立してその機能の実現が追究されてきた。本研究では、画像に写されたものを認識することによりそれらの復元が精緻になり、逆にその物理的構造や特性を明示的に復元することにより認識がより精確になるよう、両者の有機的統合を、統計的機械学習にもとづいた見通しの良い定式化と効率的な推定手法の導出により実現することを目指した。この目標に向け、事業期間において単一画像からの形状、反射特性、光源状況と物体姿勢の推定手法、幾何的特徴を保持する統計的モデルによる物体形状表現法、主に水中を含む物体のより精確な3次元幾何形状の復元手法、水面反射による形状復元手法の導出、さらに、深層学習生成モデルを用いた新たな反射特性モデルの導出、これを用いた単一画像からの反射特性と光源状況の復元、偏光ステレオカメラを用いた物体の精緻な三次元形状復元、そして偏光単眼視による空の偏光分布を用いた物体形状復元など、物体や光景の見えからの反射特性や精密な形状を中心とした物理量の表現や復元手法を多く導出した。また、深層学習モデルを用いた物体認識の真値ラベリングためのビデオにおける画素ごとのラベルの効率的な補間手法や、画素ごとの素材同定の新たな手法を導出した。これらの研究成果により、精緻な視覚からの認識、さらには認識された物体や光景に特化された物理量の復元のための基盤技術を確立し、それらの統合的利用も具体的に試行した。これら研究成果は当該分野のトップ国際会議を含め対外発表ならびに国際論文誌投稿をおこない、その成果の普及に努めた。これらのうち一件については、Best Student Paperを受賞した。また、特に形状復元技術に関し、いくつかの特許申請あるいは申請準備をおこなっている。

Report

(3 results)
  • 2020 Annual Research Report
  • 2019 Research-status Report
  • 2018 Research-status Report
  • Research Products

    (14 results)

All 2021 2020 2019 2018

All Journal Article (1 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (11 results) (of which Int'l Joint Research: 8 results,  Invited: 4 results) Patent(Industrial Property Rights) (2 results) (of which Overseas: 1 results)

  • [Journal Article] Depth Sensing by Near-Infrared Light Absorption in Water2020

    • Author(s)
      Y. Asano, Y. Zheng, K. Nishino, I. Sato
    • Journal Title

      IEEE Transactions on Pattern Analysis and Machine Intelligence (TPAMI)

      Volume: - Pages: 1-1

    • DOI

      10.1109/tpami.2020.2973986

    • Related Report
      2019 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] Shape from Sky : Polarimetric Normal Recovery Under The Sky2021

    • Author(s)
      Tomoki Ichikawa, Matt Purri, Ryo Kawahara, Shohei Nobuhara, Kristin Dana, and Ko Nishino
    • Organizer
      IEEE/CVF Conference on Computer Vision and Pattern Recognition CVPR 2021
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Polarimetric Normal Stereo2021

    • Author(s)
      Yoshiki Fukao, Ryo Kawahara, Shohei Nobuhara, and Ko Nishno
    • Organizer
      IEEE/CVF Conference on Computer Vision and Pattern Recognition CVPR 2021
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 3D-GMNet : Single-View 3D Shape Recovery as A Gaussian Mixture2020

    • Author(s)
      Kohei Yamashita, Shohei Nobuhara, and Ko Nishino
    • Organizer
      The 31st British Machine Vision Virtual Conference BMVC2020
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Video Region Annotation with Sparse Bounding Boxes2020

    • Author(s)
      Yuzheng Xu, Yang Wu, Shohei Nobuhara, and Ko Nishino
    • Organizer
      British Machine Vision Virtual Conference BMVC2020 (Best Student Paper Award)
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Invertible Neural BRDF for Object Inverse Rendering2020

    • Author(s)
      Zhe Chen, Shohei Nobuhara, and Ko Nishino
    • Organizer
      European Conference on Computer Vision ECCV2020
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Appearance and Shape from Water Reflection2020

    • Author(s)
      Ryo Kawahara, Meng-Yu Jennifer Kuo, Shohei Nobuhara, and Ko Nishino
    • Organizer
      IEEE/CVF Winter Applications on Computer Vision WACV' 20
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Surface Normals and Shape from Water2020

    • Author(s)
      Satoshi Murai, Meng-Yu Jennifer Kuo, Ryo Kawahara, Shohei Nobuhara, and Ko Nishino
    • Organizer
      IEEE/CVF International Conference on Computer Vision ICCV' 19
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] コンピュータで視る2019

    • Author(s)
      西野 恒
    • Organizer
      AIITイノベーションデザインフォーラム
    • Related Report
      2018 Research-status Report
    • Invited
  • [Presentation] Freeing Computer Vision from Its Fundamental Limits2019

    • Author(s)
      西野 恒
    • Organizer
      Computational Color Imaging Workshop 2019
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] コンピュータビジョンの限界突破2018

    • Author(s)
      西野 恒
    • Organizer
      電子情報通信学会 スマートインフォメディアシステム研究会
    • Related Report
      2018 Research-status Report
    • Invited
  • [Presentation] コンピュータで視る未来社会2018

    • Author(s)
      西野 恒
    • Organizer
      創設80周年記念産研テクノサロンスペシャル1
    • Related Report
      2018 Research-status Report
    • Invited
  • [Patent(Industrial Property Rights)] 形状測定装置、形状測定方法、形状測定プログラム及び内視鏡システム2020

    • Inventor(s)
      西野恒、延原章平、川原僚、グウオ・モンユージェニファー、村井聖
    • Industrial Property Rights Holder
      国立大学法人京都大学
    • Industrial Property Rights Type
      特許
    • Filing Date
      2020
    • Related Report
      2020 Annual Research Report
    • Overseas
  • [Patent(Industrial Property Rights)] 形状測定装置、形状測定方法、形状測定プログラム及び内視鏡システム2019

    • Inventor(s)
      西野恒、延原章平、川原僚、グウオ・モンユージェニファー、村井聖
    • Industrial Property Rights Holder
      国立大学法人京都大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      2019-188208
    • Filing Date
      2019
    • Related Report
      2019 Research-status Report

URL: 

Published: 2018-03-28   Modified: 2022-04-15  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi