画像のボケと両眼視差を同時に再現する注視反応ディスプレイ

• Project Area: Integrative studies of neural mechanisms and advanced information technologies for perception of material and surface qualities
• Project/Area Number: 23135501
• Research Category: Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area)
• Allocation Type: Single-year Grants
• Review Section: Complex systems
• Research Institution: Tohoku University
• Principal Investigator: 岡谷 貴之 東北大学, 情報科学研究科, 准教授 (00312637)
• Project Period (FY): 2011-04-01 – 2013-03-31
• Project Status: Completed (Fiscal Year 2012)
• Budget Amount: ¥11,440,000 (Direct Cost: ¥8,800,000、Indirect Cost: ¥2,640,000); Fiscal Year 2012: ¥5,720,000 (Direct Cost: ¥4,400,000、Indirect Cost: ¥1,320,000); Fiscal Year 2011: ¥5,720,000 (Direct Cost: ¥4,400,000、Indirect Cost: ¥1,320,000)
• Keywords: 質感 / 画像認識 / 画像特徴 / 立体ディスプレイ / 被写界深度 / ボケ / 注視計測 / 眼球運動 / 臨場感 / 奥行き知覚

Outline of Annual Research Achievements

研究計画開始時，両眼視差とDOFボケを同時提示可能なシステムを構築し，それを用いてDOFボケが質感知覚に与える影響を調べることを研究の主要な目的としたが，初年度の23年度中には同システムの構築を終え，さらに実験もかなりの部分を終えることができたので，今年度は，さらなる詳細な検証実験の実施と，さらにこれまでの研究で見えてきた新しい課題に取り組んだ．さらに，それら成果を踏まえて，本領域の計画班や他の公募班と共同研究を実施，あるいはその準備も行った．まず取り組んだ課題は，23年度実績報告書記載の通り，質感属性の画像認識アルゴリズムの研究である．研究の結果，従来の研究に比べて，自然画像を扱えるようになり，透明感や滑らかさ，暖かさといった従来扱いにくかった質感属性を対象とできるようになった．この成果は国際会議ICPRにて公表し，さらにその内容を発展させたものを専門誌に投稿準備中である．次に，同新学術領域に参加する他の公募班（新潟大学，電気通信大学，大阪大学，京都大学の各研究グループ）と，共同研究を実施した．現在も研究中の課題を含むため詳細は省くが，本研究計画で実現した注視計測システムの生体計測への応用，われわれが実現した質感認識手法と言語的特性に基づく質感認識手法との融合による新しいアプリケーションの実現，同手法と生体の質感認識方法との比較などを含む．これらの成果は近いうちに公表される予定である．

Research Progress Status

24年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

24年度が最終年度であるため、記入しない。

Research Products

• [Journal Article] Discrete Maximum Posterior Marginal Inference for Non-uniformly Discretized Variable Space (2013)
  • Author(s): Masaki Saito, Takayuki Okatani, and Koichiro Deguchi
  • Journal Title: Proceedings of Computer Vision and Pattern Recognition Volume: 1 Pages: 1-8
  • Peer Reviewed
• [Journal Article] Detecting Changes in 3D Structure of a Scene from Multi-view Images Captured by a Vehicle-mounted Camera (2013)
  • Author(s): Ken Sakurada, Takayuki Okatani, and Koichiro Deguchi
  • Journal Title: Proceedings of Computer Vision and Pattern Recognition Volume: 1 Pages: 1-8
• [Journal Article] Optimal integration of photometric and geometric surface measurements using inaccurate reflectance/illumination knowledge (2012)
  • Author(s): Takayuki Okatani and Koichiro Deguchi
  • Journal Title: Proceedings of Computer Vision and Pattern Recognition Volume: 1 Pages: 254-261
  • DOI: 10.1109/cvpr.2012.6247683
  • Peer Reviewed
• [Journal Article] Application of the mean field methods to MRF optimization in computer vision (2012)
  • Author(s): Masaki Saito, Takayuki Okatani, Koichiro Deguchi
  • Journal Title: Proceedings of Computer Vision and Pattern Recognition Volume: 1 Pages: 1680-1687
  • DOI: 10.1109/cvpr.2012.6247862
  • Peer Reviewed
• [Journal Article] Recognizing Surface Qualities from Natural Images Based on Learning to Rank (2012)
  • Author(s): Takashi Abe, Takayuki Okatani, Koichiro Deguchi
  • Journal Title: Proceedings of International Conference on Pattern Recognition Volume: 1 Pages: 3712-3715
  • Peer Reviewed
• [Journal Article] Efficient Algorithm for Low-rank Matrix Factorization with Missing Components and Performance Comparison of Latest Algorithms (2011)
  • Author(s): Takayuki Okatani, Takahiro Yoshida, Koichiro Deguchi
  • Journal Title: Proceedings of International Conference on Computer Vision Volume: 1 Pages: 1-8
  • DOI: 10.1109/iccv.2011.6126324
  • Peer Reviewed
• [Journal Article] Accurate and robust planar tracking based on a model of image sampling and reconstruction process (2011)
  • Author(s): Eisuke Ito, Takayuki Okatani, Koichiro Deguchi
  • Journal Title: Proceedings of The 10th IEEE International Symposium on Mixed and Augmented Reality Volume: 1 Pages: 1-8
  • DOI: 10.1109/ismar.2011.6092364
  • Peer Reviewed
• [Journal Article] Sensing method of total-intemal-reflection-based tactile sensor (2011)
  • Author(s): Momotaro Koike, Satoshi Saga, Takayuki Okatani, Koichiro Deguchi
  • Journal Title: Proceedings of World Haptics Volume: 1 Pages: 615-619
  • DOI: 10.1109/whc.2011.5945556
  • Peer Reviewed
• [Presentation] ディープラーニングによる画像認識 (2013)
  • Author(s): 岡谷貴之
  • Organizer: 医用画像研究会
  • Place of Presentation: 東北大学
  • Year and Date: 2013-07-19
  • Invited
• [Presentation] ディープラーニングと画像認識への応用 (2013)
  • Author(s): 岡谷貴之
  • Organizer: 画像センシングシンポジウム
  • Place of Presentation: パシフィコ横浜
  • Year and Date: 2013-06-13
  • Invited
• [Presentation] ディープラーニング (2013)
  • Author(s): 岡谷貴之
  • Organizer: 情報処理学会CVIM研究会
  • Place of Presentation: 京都大学
  • Year and Date: 2013-01-17
  • Invited
• [Presentation] 物の見え方の物理と最適化計算に基づく画像認識 (2012)
  • Author(s): 岡谷貴之
  • Organizer: ブレインウェア研究会
  • Place of Presentation: 東北大学電気通信研究所
  • Year and Date: 2012-06-26
  • Invited
• [Presentation] 一般物体認識から質感の認識へ (2012)
  • Author(s): 岡谷貴之
  • Organizer: 質感脳情報学領域第７回研究集会「視覚質感認知と一般物体認識に関する研究会」
  • Place of Presentation: 豊橋技術科学大学
  • Year and Date: 2012-04-20
  • Invited
• [Presentation] 画像の標本化過程を考慮した高精度かつ頑健な平面の追跡 (2011)
  • Author(s): 伊藤栄介, 岡谷貴之, 出口光一郎
  • Organizer: 画像の認識・理解シンポジウム
  • Place of Presentation: 金沢
  • Year and Date: 2011-07-22
• [Presentation] 震災特別セッション「震災復興へのビジョン」講演 (2011)
  • Author(s): 岡谷貴之
  • Organizer: 画像の認識・理解シンポジウム
  • Place of Presentation: 金沢(招待講演)
  • Year and Date: 2011-07-22
• [Presentation] 両眼視差と被写界深度ボケを同時に提示する注視反応ディスプレイ (2011)
  • Author(s): 折笠達郎, 岡谷貴之, 出口光一郎
  • Organizer: 画像の認識・理解シンポジウム
  • Place of Presentation: 金沢
  • Year and Date: 2011-07-22
• [Presentation] 多視点3次元復元の研究動向 (2011)
  • Author(s): 鳥居秋彦, 岡谷貴之, 延原章平
  • Organizer: 情報処理学会研究報告Vol.2011-CVIM-176
  • Place of Presentation: 大阪
  • Year and Date: 2011-05-19
• [Remarks] 研究内容
  • URL: http://www.vision.is.tohoku.ac.jp/jp/research/