• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2018 年度 実績報告書

コンピュータビジョンで実現する多様で複雑な質感の認識機構

計画研究

研究領域多様な質感認識の科学的解明と革新的質感技術の創出
研究課題/領域番号 15H05918
研究機関国立情報学研究所

研究代表者

佐藤 いまり  国立情報学研究所, コンテンツ科学研究系, 教授 (50413927)

研究分担者 平 諭一郎  東京藝術大学, 学内共同利用施設等, 准教授 (10582819)
鄭 銀強  国立情報学研究所, コンテンツ科学研究系, 准教授 (30756896)
向川 康博  奈良先端科学技術大学院大学, 先端科学技術研究科, 教授 (60294435)
佐藤 洋一  東京大学, 生産技術研究所, 教授 (70302627)
西野 恒  京都大学, 情報学研究科, 教授 (60814754)
研究期間 (年度) 2015-06-29 – 2020-03-31
キーワード反射解析 / 分光解析 / コンピュータビジョン / 散乱解析 / コンピューテーショナルフォトグラフィ
研究実績の概要

本計画研究では,既存の反射モデルでは表現することが難しい微細構造を持つ物体を対象に,物体表面の微細構造に起因する表面下散乱,内部散乱,異方性反射,構造色,相互反射といった複雑な光学現象に起因する質感を効率的に記録・再現・加工する手法の開発を目指している。具体的には,様々な照射方向・物体表面の光照射点,観察方向のもとで対象物体を観察し,相互反射や内部散乱といった光学現象の各要素を分離して計測する技術を開発し,人間の質感認知のためにどのような光学現象の正確な再現が必要であるのか,物体表面・内部の光の伝搬はどの程度の精度で再現が必要なのかについての検討を進める。この解析に基づき,質感知覚と関係する光学特性を近似するモデルを提案し,対象物体の多様な質感を効果的にモデル化する手法を開発することを目的としている。平成30年度は,物体内部での光の散乱および光の伝搬解析を進めた。H29に開発した吸収および水などの媒質による光の吸収のモデル式に基づく水分量および物体表面の色の推定手法は、複数色で構成する物体表面へと発展させ,その成果は画像解析分野のトップジャーナルに再録された。また,プロジェクタカメラシステムを用いて半径の異なるリング状の照明を用いて物体表面の輝度を観察し,その明るさ変化を解析することにより,物体表面の相互反射や内部散乱といった光学現象の各要素を分離して計測する技術を開発した。この成果は,新規性、有効性ともに高い評価をうけ,コンピュータビジョンのトップ会議に採択された。また、ガラス、布、紙など、様々な質感を持つ物体を対象としたデッサン画のデータベース構築を行い、機械学習にもとづくデッサン画の作成において良好な結果を得ている。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

本計画研究では,既存の反射モデルでは表現することが難しい微細構造を持つ物体を対象に,物体表面の微細構造に起因する表面下散乱,内部散乱,異方性反射,構造色,相互反射といった複雑な光学現象に起因する質感を効率的に記録・再現・加工する手法の開発を目指している。H30年度は、物体内部での光の散乱、光の伝搬解析を積極的に進めた。H29年度に開発した吸収および水などの媒質による光の吸収のモデル式に基づく水分量および物体表面の色の推定手法を複数色で構成する物体表面へと発展させ,その成果は画像解析分野のトップジャーナルに再録された。また、物体表面の相互反射や内部散乱といった光学現象の各要素を分離して計測する技術をプロジェクタカメラシステムを用いたリング型照明により実現した。この研究は,新規性、有効性ともに高い評価をうけ,コンピュータビジョンのトップ会議で成果発表する機会を得た。また,ガラス,布,紙など,様々な質感を持つ物体を対象としたデッサン画のデータベース構築を行い,機械学習にもとづくデッサン画の作成において良好な結果を得ている。その他,蛍光指紋にもとづく素材識別では機械学習により識別に最適な光源分布を推定する手法を提案しており,順調に進展している。

今後の研究の推進方策

H30年度は,物体表面の相互反射,物体内部での散乱といった複雑な現象を分離して計測できる技術を発展させ、光の伝搬の分離結果を詳細に得ることができた。今後,さらに複雑な物体に対して計測を進め,心理学の研究者との連携により,得られた光学現象の各要素とその要素が導く質感の関係についてのユーザースタディを進め,質感をモデル化し再現できる技術へと発展させことを予定している。デッサン画生成に関しては,鉛筆の濃さによるコントラスト,質感表現に重要と考えられる領域の抽出など,専門家との連携により詳細な解析を進め,成果発表,技術展示を予定している。蛍光発光に基づく素材識別についても最新の機械学習手法を取り入れた頑健な手法へと発展させていく。

  • 研究成果

    (15件)

すべて 2018 その他

すべて 国際共同研究 (1件) 雑誌論文 (5件) (うち査読あり 5件、 オープンアクセス 4件) 学会発表 (8件) (うち国際学会 8件、 招待講演 1件) 産業財産権 (1件)

  • [国際共同研究] Carnegie Mellon University(米国)

    • 国名
      米国
    • 外国機関名
      Carnegie Mellon University
  • [雑誌論文] Estimation of Wetness and Color from a Single Multispectral Image2018

    • 著者名/発表者名
      H. Okawa, M. Shimano, Y. Asano, R. Bise, K. Nishino, I. Sato
    • 雑誌名

      IEEE Transactions on Pattern Analysis and Machine Intelligence (TPAMI)

      巻: N/A ページ: 00-00

    • DOI

      DOI: 10.1109/TPAMI.2019.2903496

    • 査読あり
  • [雑誌論文] Decomposition of Reflection and Scattering by Multiple Weighted Measurements2018

    • 著者名/発表者名
      T. Takatani, Y. Mukaigawa, Y. Matsushita, Y. Yagi
    • 雑誌名

      IPSJ Transactions on Computer Vision and Applications

      巻: N/A ページ: 1-13

    • DOI

      10.1186/s41074-018-0049-4

    • 査読あり / オープンアクセス
  • [雑誌論文] Material Classification from Time-of-Flight Distortions2018

    • 著者名/発表者名
      K. Tanaka, Y. Mukaigawa, T. Funatomi, H. Kubo, Y. Matsushita, Y. Yagi
    • 雑誌名

      IEEE Trans. on Pattern Analysis and Machine Intelligence

      巻: N/A ページ: 00-00

    • DOI

      DOI: 10.1109/TPAMI.2018.2869885

    • 査読あり / オープンアクセス
  • [雑誌論文] Acquiring Non-parametric Scattering Phase Function from a Single Image2018

    • 著者名/発表者名
      Y. Minetomo, H. Kubo, T. Funatomi, M. Shinya, Y. Mukaigawa
    • 雑誌名

      Computational Visual Media

      巻: N/A ページ: 323-331

    • DOI

      DOI: 10.1007/s41095-018-0122-z

    • 査読あり / オープンアクセス
  • [雑誌論文] Controlling translucency by UV printing on a translucent object2018

    • 著者名/発表者名
      T. Takatani, K. Fujita, K. Tanaka, T. Funatomi, Y. Mukaigawa
    • 雑誌名

      IPSJ Transactions on Computer Vision and Applications

      巻: N/A ページ: 1-14

    • DOI

      N/A

    • 査読あり / オープンアクセス
  • [学会発表] Deeply Learned Filter Response Functions for Hyperspectral Reconstruction2018

    • 著者名/発表者名
      S. Nie, L. Gu, Y. Zheng, A. Lam, N. Ono, I. Sato
    • 学会等名
      IEEE Conference on Computer Vision and Pattern Recognition
    • 国際学会
  • [学会発表] Variable Ring Light Imaging: Capturing Transient Subsurface Scattering with an Ordinary Camera2018

    • 著者名/発表者名
      K. Nishino, A. Subpa-asa, Y. Asano, M. Shimano, I. Sato
    • 学会等名
      European Conference on Computer Vision
    • 国際学会
  • [学会発表] Polarimetric Three-View Geometry2018

    • 著者名/発表者名
      L. Chen, Y. Zhang, A. Subpa-asa, I. Sato
    • 学会等名
      The European Conference on Computer Vision
    • 国際学会
  • [学会発表] Coded Illumination and Imaging for Fluorescence Based Classification2018

    • 著者名/発表者名
      Y. Asano, M. Meguro, C. Wang, A. Lam, Y. Zheng, T. Okabe
    • 学会等名
      Proc. The European Conference on Computer Vision
    • 国際学会
  • [学会発表] Reconstruction of Volumetric Reflectance using Spatio-sequential Frequency Correlation Imaging2018

    • 著者名/発表者名
      T. Takatani, T. Aoto, K. Tanaka, T. Funatomi, Y. Mukaigawa
    • 学会等名
      SIGGRAPH Asia
    • 国際学会
  • [学会発表] Acquiring Short Range 4D Light Transport with Synchronized Projector Camera System2018

    • 著者名/発表者名
      T. Iwaguchi, H. Kubo, T. Funatomi, Y. Mukaigawa, S. Narasimhan
    • 学会等名
      VRST2018
    • 国際学会 / 招待講演
  • [学会発表] Mathematical Model for Pop-up Effect of ChromaDepth2018

    • 著者名/発表者名
      Y. Nakanishi, H. Kubo, T. Funatomi, Y. Mukaigawa
    • 学会等名
      VRST2018
    • 国際学会
  • [学会発表] Time-resolved Light Transport Decomposition for Thermal Photometric Stereo2018

    • 著者名/発表者名
      K. Tanaka, N. Ikeya, T. Takatani, H. Kubo, T. Funatomi, Y. Mukaigawa
    • 学会等名
      IEEE Conference on Computer Vision and Pattern Recognition
    • 国際学会
  • [産業財産権] 画像処理装置及び方法2018

    • 発明者名
      シジエ、リン、鄭、佐藤、ラム、小野
    • 権利者名
      シジエ、リン、鄭、佐藤、ラム、小野
    • 産業財産権種類
      特許
    • 産業財産権番号
      特願2018-114188

URL: 

公開日: 2019-12-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi