• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2018 年度 実施状況報告書

ディープコンピュテーショナルフォトグラフィ

研究課題

研究課題/領域番号 18K19818
研究機関大阪大学

研究代表者

長原 一  大阪大学, データビリティフロンティア機構, 教授 (80362648)

研究期間 (年度) 2018-06-29 – 2020-03-31
キーワードコンピュテーショナルフォトグラフィ / ディープラーニング
研究実績の概要

画像認識の分野ではディープニューラルネットワーク(DNN)が盛んに用いられ,物体認識やシーン理解,画像復元などにおいて,従来のモデルベースの特徴量や学習手法を凌駕している.しかし,従来はデジタル画像として計測された後の画像認識パイプラインのデジタル層にのみ,DNNによる学習が用いられているにすぎなかった.本研究では,特徴量や認識器と共にハードウェア設計も学習により求める新しいフレームワークを提案し,ディープコンピュテーショナルフォトグラフィ(DCP)と名付ける.学習による最適化を画像認識パイプライン全体に適用することで,最適な画像特徴を求めるのみならず,光線情報をどのように計測するかという視覚システムの本質を探究することである.生物界では多様な視覚システムがその生物の生存環境やタスクがもたらす進化の結果として発現しているが,本研究は同様に人工視覚システム設計にそれを持ち込むものである.DCPでは,従来の画像特徴抽出のためのCNNのさらに下に,画素の時間露光タイミングを表現するサンプリングCNN層と集光特性を表現する物理CNN層をさらに加える.これらの画像認識パイプライン全体をDNNで表現し,シーンとラベルセットにより学習することで従来の認識および画像特徴が学習されると共に,カメラハードウェア設計をサンプリングCNN層および物理CNN層から学習により得る.その学習結果を基にカメラハードウェア試作を行い,学習によるカメラ設計の有用性を検証する.具体的には,圧縮ビデオセンシング単一画像からの人の行動認識を事例タスクとして設定し,このタスクに最適化したカメラシステムを実現した.

現在までの達成度 (区分)
現在までの達成度 (区分)

1: 当初の計画以上に進展している

理由

具体的な応用として,DCPのアイデアを圧縮ビデオセンシングに適用することで,学習により最適な露光パターンを求めた.このパターンと同時学習された動画生成デコーダを用いることで,生成された動画像の品質が従来に対して1dB以上の改善をもたらした.この成果を国際会議に投稿し,コンピュータビジョンのトップ会議のひとつである,ECCV2018に投稿して採録された.
また,同様のDCPのフレームワークを行動認識に適用した.その結果,シミュレーションではあるが符号化画像一枚からの行動認識が行えることを確認した.

今後の研究の推進方策

今後は,シミュレーションで実証した行動認識の応用に関して,実カメラによる実証を行い実現性をさらに実証する.また,モーションブラー復元など他の応用に関しても同様に実証を行い,DCPのフレームワークの一般性や有用性を示す.

次年度使用額が生じた理由

実験機材の購入が間に合わず,次年度に繰り越したため.

  • 研究成果

    (4件)

すべて 2019 2018

すべて 学会発表 (3件) (うち国際学会 2件) 産業財産権 (1件)

  • [学会発表] 符号化露光画像を用いた人物の行動認識2019

    • 著者名/発表者名
      大河原 忠, 吉田 道隆, 長原 一, 八木康史
    • 学会等名
      情報処理学会CVIM研究会
  • [学会発表] Joint optimization for compressive video sensing and reconstruction under hardware constraints2018

    • 著者名/発表者名
      Michitaka Yoshida, Akihiko Torii, Masatoshi Okutomi, Kenta Endo, Yukinobu Sugiyama, Rin-ichiro Taniguchi, Hajime Nagahara
    • 学会等名
      International Workshop on Image Sensors and Imaging Systems
    • 国際学会
  • [学会発表] Joint optimization for compressive video sensing and reconstruction under hardware constraints2018

    • 著者名/発表者名
      Michitaka Yoshida, Akihiko Torii, Masatoshi Okutomi, Kenta Endo, Yukinobu Sugiyama, Rin-ichiro Taniguchi, Hajime Nagahara
    • 学会等名
      European Conference on Computer Vision
    • 国際学会
  • [産業財産権] 動画像処理方法及び動画像処理装置2019

    • 発明者名
      長原一、大河原忠、吉田道隆
    • 権利者名
      大阪大学
    • 産業財産権種類
      特許
    • 産業財産権番号
      特願2019-001491

URL: 

公開日: 2019-12-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi