• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

固視微動を模擬するカメラ運動に基づく奥行きと画像の超解像復元

研究課題

研究課題/領域番号 19K12046
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分61010:知覚情報処理関連
研究機関東京都立大学

研究代表者

田川 憲男  東京都立大学, システムデザイン研究科, 教授 (00244418)

研究期間 (年度) 2019-04-01 – 2022-03-31
研究課題ステータス 完了 (2021年度)
配分額 *注記
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2021年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
2020年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
2019年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
キーワード固視微動 / 奥行復元 / オプティカルフロー / カメラ運動 / 最尤推定 / 多重解像度 / 変分ベイズ推定 / 多重解像度処理 / 陰影からの形状復元 / トレモア / ドリフト / マイクロサッカード / 輝度勾配法 / 反復レジストレーション / 特徴点対応 / 超解像 / 奥行き復元 / 確率共鳴 / 多視点画像
研究開始時の研究の概要

本研究では、固視微動を模擬するカメラ運動によって得られる画像をもとに、シーンを超解像で認識するための方法を構築する。微小なカメラ回転によって生じる画像上のずれは、超解像情報を有し、そのずれを利用して1枚の超解像画像に合成可能である。そのためには、各画素でのずれ、したがって対象までの奥行きを正確に知る必要がある。超解像化された画像は超解像な奥行き情報を持つことになる。そこで、元の低解像度画像を入力とし、超解像画像と超解像奥行きを反復的に解くアルゴリズムを構築する。また、固視微動には小さな運動であるドリフト/トレモアに加え、大きな回転であるマイクロサッカードがあるため、両者の相補的統合も検討する。

研究成果の概要

本研究では、固視微動による奥行知覚の計算論的な検討を行った。連続する2枚の画像間に生じるオプティカルフローが有するカメラ運動と奥行情報を、観測量である画像輝度値から高精度に抽出するアルゴリズムとして、オプティカルフローを陽に検出するかしないかの二通りの方式で検討した。オプティカルフローを陽に検出する方式では、従来法ではカメラ運動の推定精度が不十分であることに着目し、最尤推定よりも精度の高いアルゴリズムの構築を行った。オプティカルフローを陽に検出しない直接法の枠組みでは、変分ベイズ法に基づく多重解像度処理アルゴリズムを構築した。

研究成果の学術的意義や社会的意義

本研究成果は、固視微動の奥行知覚への貢献を計算論的に明らかにするものである。固視微動のメカニズムやその機能は、未だ十分に解明されておらず、学術的に意義深いものと考える。一方で、応用面からは、カメラを不規則に動かしながら対象を撮影することで、3次元情報の抽出が可能であり、簡潔なハードウェアとして有効な技術となり得る。本研究を更に進めることで、連続画像の有する豊富な情報を十分に活用した撮像系が実現可能であり、少ない画素でも高精細な画像を得ることが可能となると期待される。

報告書

(4件)
  • 2021 実績報告書   研究成果報告書 ( PDF )
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 研究成果

    (9件)

すべて 2021 2020 その他

すべて 雑誌論文 (1件) (うち査読あり 1件、 オープンアクセス 1件) 学会発表 (6件) (うち国際学会 1件) 備考 (2件)

  • [雑誌論文] Stereoscopic Calculation Model Based on Fixational Eye Movements2021

    • 著者名/発表者名
      Norio Tagawa
    • 雑誌名

      Pattern Recognition, IntechOpen

      巻: -

    • DOI

      10.5772/intechopen.97404

    • ISBN
      9781789853322, 9781789855616
    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス
  • [学会発表] 画像における2次元関節情報に基づく陸上競技ランナーの3次元姿勢推定2021

    • 著者名/発表者名
      千ヶ崎聖斗, 田川憲男
    • 学会等名
      映像情報メディア学会冬季大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] グループ行動認識モデルへの時間情報埋め込みに関する考察2021

    • 著者名/発表者名
      熊倉湧太, 田良島周平, 田川憲男
    • 学会等名
      映像情報メディア学会メディア工学研究会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 複数カメラ複数人物追跡におけるトラックレット外観特徴抽出方法に関する検討2021

    • 著者名/発表者名
      斎藤友博, 田良島周平, 田川憲男
    • 学会等名
      映像情報メディア学会メディア工学研究会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] Player Tracking using Multi-viewpoint Images in Basketball Analysis2020

    • 著者名/発表者名
      Shuji Tanikawa, Norio Tagawa
    • 学会等名
      Int. Conf. on Computer Vision Theory and Applications
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] 多視点映像からの関節情報を用いたテニス選手の動き解析2020

    • 著者名/発表者名
      増田瑞樹, 田川憲男
    • 学会等名
      電子情報通信学会東京支部学生研究発表会
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] 多視点画像で検出される関節位置に基づく複数人の3次元姿勢の復元2020

    • 著者名/発表者名
      斎藤友博, 田川憲男
    • 学会等名
      映像情報メディア学会 メディア工学研究会
    • 関連する報告書
      2019 実施状況報告書
  • [備考] 東京都立大学 教員紹介

    • URL

      https://www.tmu.ac.jp/stafflist/data/ta/593.html

    • 関連する報告書
      2021 実績報告書
  • [備考] 東京都立大学 教員紹介

    • URL

      https://www.tmu.ac.jp/stafflist/data/ta/593.html

    • 関連する報告書
      2020 実施状況報告書 2019 実施状況報告書

URL: 

公開日: 2019-04-18   更新日: 2023-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi