• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2021 Fiscal Year Annual Research Report

人間機械融合視覚による質感認識能力拡張

Planned Research

Project AreaAnalysis and synthesis of deep SHITSUKAN information in the real world
Project/Area Number 20H05958
Research InstitutionOsaka University

Principal Investigator

岩井 大輔  大阪大学, 基礎工学研究科, 准教授 (90504837)

Co-Investigator(Kenkyū-buntansha) 伊藤 勇太  東京大学, 大学院情報学環・学際情報学府, 特任准教授 (10781362)
Project Period (FY) 2020-11-19 – 2025-03-31
Keywords拡張現実感 / 人間拡張 / 光学シースルーHMD / プロジェクションマッピング / 質感の科学
Outline of Annual Research Achievements

本年度は、(1)実物反射光から、直接・間接反射成分を分離し、それを人の視界に直接与えることのできる、質感分離スコープの性能向上と、(2)光学シースルーディスプレイに光線の加算減算を可能とする光変調眼鏡の構築と、「陰影」や「焦点ボケ」の再現といった新規な質感提示技術の構築を、当初の目標としていた。
(研究項目1)質感分離スコープでは、複数枚の空間高周波パタン画像を対象に照射し、直接照射していない箇所のみを透過させる空間遮蔽マスクを通してそれを観察することで、間接反射成分のみを観察することができる。昨年度構築したシステムでは、透過型液晶を用いて直接反射成分を空間的にブロックする仕組みとしていたが、特に視線方向に装置が長大になってしまうという欠点があった。そこで、反射型液晶であるLCoS (liquid crystal on silicon) を用いて光路を折り畳めるようにすることで、装置のスリム化に成功した。また、照射パタンと透過パタンとの位置ずれにより縞模様のアーチファクトが視認されるという問題があったが、光学系を再設計して位置ずれを改善することに成功した。また、分離に必要となるパタン数を少なくする研究を行い、最小で2枚のチェッカパタンを投影するだけで間接反射成分を観測可能であることを明らかとした。
(研究項目2)加算減算可能な光学シースルーディスプレイを構築し、新規な質感提示アプローチとして「陰影」を忠実に再現する技術を開発した。実験により、実物からの影を重畳する仮想物体に反映することや、仮想物体からの影を実物に重畳させることにも成功した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本年度の2つの当初目標それぞれについて、研究がおおむね順調に進展したと考えている。
(研究項目1)前年度に構築した質感分離スコープの性能を向上させることができた。特に、LCoSを用いた光学系を採用することで、装置がスリム化され、さらにパターンを工夫することでより少ないパターン数での分離が可能となった。年度当初の交付申請での目的が達成されており、順調に進展したと考えている。国内会議にて成果発表も実施できている。
(研究項目2)仮想物体と実物体との間での相互な陰影の再現が可能となったことから、交付申請での目的の一部が達成されており、研究は概ね進展したものと考えている。この成果は、拡張現実に関する主要な国際会議IEEE International Symposium on Mixed and Augmented Reality 2021にて口頭発表した。
上記に加え、プロジェクションマッピングおよびデジタルファブリケーション技術を用いた質感提示技術についても研究が進展している。

Strategy for Future Research Activity

本年度の結果をうけて、代表者、分担者は以下のように研究を推進することとする。
【代表者】被験者実験を実施して、質感分離眼鏡のの性能評価を行う。またそれと並行して、プロジェクションマッピングを用いた質感編集にも取り組む。具体的には、近接閲覧環境を想定して、近年のスマートフォンのディスプレイに匹敵する高解像度投影システムを構築し、その質感編集性能を評価する。
【分担者】光線の加算減算が可能な光学シースルーディスプレイの開発と、それを用いた新規な質感提示技術の開発に継続して取り組む。また来年度以降は、光学シースルーディスプレイを用いた質感提示において、不可視な情報を可視化することで、現実空間の場の質感を変調することが可能となるかどうかについての調査も実施する。その最初の例として、シュリーレン撮影法を用いて空気の流れ場を計測するシステムを構築し、それを光学シースルーディスプレイと組み合わせることを試みる。

  • Research Products

    (11 results)

All 2022 2021

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 1 results) Presentation (9 results) (of which Int'l Joint Research: 1 results,  Invited: 2 results)

  • [Journal Article] SoftPrint: Investigating Haptic Softness Perception of 3D Printed Soft Object in FDM 3D Printers2021

    • Author(s)
      Motoki Miyoshi, Parinya Punpongsanon, Daisuke Iwai, Kosuke Sato
    • Journal Title

      Journal of Imaging Science and Technology

      Volume: 65 Pages: 40406-1-40406-8

    • DOI

      10.2352/J.ImagingSci.Technol.2021.65.4.040406

    • Peer Reviewed / Open Access
  • [Journal Article] Multifocal Stereoscopic Projection Mapping2021

    • Author(s)
      Sorashi Kimura. Daisuke Iwai. Parinya Punpongsanon. Kosuke Sato
    • Journal Title

      IEEE Transactions on Visualization and Computer Graphics

      Volume: 27 Pages: 4256~4266

    • DOI

      10.1109/TVCG.2021.3106486

    • Peer Reviewed
  • [Presentation] サーモクロミック材と情報コードをRGB-Cストライプ構造化した表面色制御2022

    • Author(s)
      堀 悠太郎, プンポンサノン パリンヤ, 岩井 大輔, 佐藤 宏介
    • Organizer
      情報処理学会第84回全国大会
  • [Presentation] 3Dプリント食品内部への情報埋め込み2022

    • Author(s)
      宮武 大和, プンポンサノン パリンヤ, 岩井 大輔, 佐藤 宏介
    • Organizer
      情報処理学会第84回全国大会
  • [Presentation] 光技術のプロジェクションマッピング応用2022

    • Author(s)
      岩井 大輔
    • Organizer
      電子情報通信学会総合大会
    • Invited
  • [Presentation] Blending Shadows: Casting Shadows in Virtual and Real using Occlusion-Capable Augmented Reality Near-Eye Displays2021

    • Author(s)
      Kiyosato Someya, Yuta Itoh
    • Organizer
      IEEE International Symposium on Mixed and Augmented Reality
    • Int'l Joint Research
  • [Presentation] 光学シースルー型大域反射成分観察スコープにおける投影パタンの検討2021

    • Author(s)
      牧田 整明, 岩井 大輔, 佐藤 宏介
    • Organizer
      第26回日本バーチャルリアリティ学会大会
  • [Presentation] 単一レンズ型同軸広角プロジェクタ-カメラシステムによる動的プロジェクションマッピングの基礎検討2021

    • Author(s)
      山本 健太, 岩井 大輔, 佐藤 宏介
    • Organizer
      第26回日本バーチャルリアリティ学会大会
  • [Presentation] 3次元対象へのプロジェクションマッピングにおける画質劣化抑制技術2021

    • Author(s)
      岩井 大輔
    • Organizer
      精密工学会 画像応用技術専門委員会 第3回定例研究会
    • Invited
  • [Presentation] CNNを用いた動的環境下での投影ボケ補償2021

    • Author(s)
      影山 雄太, 岩井 大輔, 佐藤 宏介
    • Organizer
      第24回 画像の認識・理解シンポジウム
  • [Presentation] 光学シースルー型大域反射成分観測スコープの構築2021

    • Author(s)
      牧田 整明, 岩井 大輔, 佐藤 宏介
    • Organizer
      第65回システム制御情報学会研究発表講演会

URL: 

Published: 2022-12-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi