• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2023 Fiscal Year Annual Research Report

Research on the improvement of visibility and operability of aerial displays and their underlying perceptual processing mechanisms

Research Project

Project/Area Number 23H03485
Allocation TypeSingle-year Grants
Research InstitutionThe University of Tokushima

Principal Investigator

水科 晴樹  徳島大学, ポストLEDフォトニクス研究所, 講師 (20389224)

Co-Investigator(Kenkyū-buntansha) 山本 健詞  徳島大学, ポストLEDフォトニクス研究所, 教授 (70402469)
山内 泰樹  山形大学, 大学院理工学研究科, 教授 (60550994)
山本 裕紹  宇都宮大学, 工学部, 教授 (00284315)
陶山 史朗  宇都宮大学, オプティクス教育研究センター, 特任教授 (70457331)
Project Period (FY) 2023-04-01 – 2027-03-31
Keywords空中像 / 視認性 / 操作性 / 奥行き知覚 / 視覚メカニズム
Outline of Annual Research Achievements

2023年度は,(1)空中ディスプレイの視認性を高める,と(2)空中ディスプレイの操作性を高める,の2点について,以下の通り研究を実施した.
(1)視認性に関しては,我々のこれまでの研究から,知覚される空中像の奥行き方向の位置が空中像の結像位置から大きくずれる可能性を考慮し,知覚位置の測定実験を行った.先行研究では,視距離が2-3 m程度の場合に,結像位置よりも奥に貼り付いて知覚されるという傾向が見られたが,手を延ばして触れることができる0.5 m程度の短距離でも,空中像が結像位置よりも奥に貼り付く傾向があることが明らかになった.
(2)操作性に関しては,多感覚情報のフィードバックによる操作性の向上と,知覚される位置のずれを考慮したシステムの検証を行った.多感覚フィードバックについては,空中像に触れた瞬間に像の色が反転する(視覚),ビープ音が鳴る(聴覚),足裏のモータが振動する(触覚)の3種類について,各々のフィードバックだけでも操作性の向上に対して効果があるが,それらの組み合わせによりさらに操作性が向上することが明らかになった.視覚・聴覚・触覚の3つのフィードバックがある場合に最も操作性が向上し,感覚間での干渉もほとんどないことが明らかになった.また,空中像に触れる指先以外に対する触覚フィードバックも操作性の向上に対して有効であることが明らかになった.また,(1)で明らかにした知覚位置のずれを考慮し,結像位置からずれた位置でシステムが反応する場合の操作性を調べた.その結果,知覚位置のずれにも関わらず,物理的な結像位置に手を延ばした場合に反応するケースが最も操作しやすいという結果を得た.このことは,人間の脳における知覚と行動の処理経路の乖離を反映しているとも考えられ,今後のさらなる検討が必要である.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

(1)視認性については,空中像の知覚される奥行き位置についてほぼ明らかにすることができたと考える.結像位置よりも奥に知覚されるという傾向は,視距離や被験者によらずかなりロバストであることから,空中ディスプレイの設計で考慮すべき点であると言える.一方,視線の誘導による知覚位置の安定化については着手できなかったが,先行研究の調査により安定化のための方策のアイディアが得られており,2024年度早々に効果を確認する予定である.色の見えのモードの影響については,表面色・開口色モードになる色・輝度条件を明らかにすることにかなりの時間を要し,空中像の奥行きについての実験までは実施できなかったが,こちらも2024年度に実施する予定である.
(2)操作性については,多感覚フィードバックの効果を明らかにすることができたとともに,空中像の知覚位置のずれに操作性が影響されないという点も明らかにすることができ,予想以上の成果を挙げることができたと考える.
以上を総合すると,おおむね順調に進展していると判断できる.

Strategy for Future Research Activity

今後の研究の推進方策については,当初の計画通りに進める予定である.
(1)視認性に関しては,空中像の視認性及び奥行き知覚に関する検討を引き続き行う.まず,注視点や絵画的要因の影響を明らかにするために,運動視差などの付加的な情報が視認性と奥行き知覚に与える効果を検証する.また,空中像と背景の輝度と色の組み合わせについて,視認性と奥行き知覚に関する検討を行う.これまでに,空中像の色の見えのモードが開口色もしくは表面色になる条件を探索してきており,この結果をもとに研究を進める.さらに,これらで得られた知見をもとに,視認性向上のための空中ディスプレイのパラメータ最適化を目指す.
(2)操作性に関しては,今後はまず視覚情報単体の場合の時間特性の解明を目指す.具体的には,空中像に実際に触れるタイミングと,システムが反応するタイミングのずれがどの程度許容できるのか,また,許容できるのであれば,ずれの有無が操作性にどのように影響するのかを明らかにする.また,(1)の視認性と同様に,空中像に運動視差などの情報を付加した場合に操作性にどのような影響があるかを明らかにする.さらにこれらの知見をもとに,操作性向上のための空中ディスプレイのパラメータ最適化を目指す.
以上で得られた知見を総合して,最終的に空中ディスプレイの知覚処理モデルを構築し,空中像の知覚や空中像に対する行動に関する理論を検討する.

  • Research Products

    (54 results)

All 2024 2023

All Journal Article (14 results) (of which Peer Reviewed: 13 results,  Open Access: 2 results) Presentation (40 results) (of which Int'l Joint Research: 20 results,  Invited: 16 results)

  • [Journal Article] Construction of 3D Image and Visibility Improvement of 2D Image Outside 3D Viewing Zone by Edge-Based Depth-Fused 3D Display Using Aerial Image and Rear Display2024

    • Author(s)
      Omoto Takahiro、Fujii Kengo、Yasugi Masaki、Suyama Shiro、Yamamoto Hirotsugu
    • Journal Title

      ITE Transactions on Media Technology and Applications

      Volume: 12 Pages: 36~43

    • DOI

      10.3169/mta.12.36

    • Peer Reviewed
  • [Journal Article] Multiplication of Aerial Images Toward Four Directions Using Non-Parallel Beam Splitters in AIRR2024

    • Author(s)
      Kishinami Kohei、Fujii Kengo、Yasugi Masaki、Suyama Shiro、Yamamoto Hirotsugu
    • Journal Title

      ITE Transactions on Media Technology and Applications

      Volume: 12 Pages: 44~53

    • DOI

      10.3169/mta.12.44

    • Peer Reviewed / Open Access
  • [Journal Article] Evaluation of Depth Perception Characteristics in Plane Fog Screen2024

    • Author(s)
      Umemoto Masaki、Mizushina Haruki、Suyama Shiro、Yamamoto Kenji
    • Journal Title

      ITE Transactions on Media Technology and Applications

      Volume: 12 Pages: 68~77

    • DOI

      10.3169/mta.12.68

    • Peer Reviewed
  • [Journal Article] Aerial display that reconstructs face orientation by use of spatial blending of two face images2024

    • Author(s)
      Kishinami Kohei、Sato Keigo、Yasugi Masaki、Suyama Shiro、Yamamoto Hirotsugu
    • Journal Title

      Journal of the Society for Information Display

      Volume: 32 Pages: 89~99

    • DOI

      10.1002/jsid.1273

    • Peer Reviewed / Open Access
  • [Journal Article] Formulation and evaluation of polarization-modulated triple-view information display with three TN-LCD layers2024

    • Author(s)
      Uchida Keitaro、Suyama Shiro、Yamamoto Hirotsugu
    • Journal Title

      Optical Review

      Volume: - Pages: -

    • DOI

      10.1007/s10043-024-00865-9

    • Peer Reviewed
  • [Journal Article] 10‐2: Line‐Based Modulation Transfer Function Measurement of Aerial Display by Use of Arrayed Optical Elements2023

    • Author(s)
      Takiyama Kazuaki、Yasugi Masaki、Suyama Shiro、Masaoka Kenichiro、Yamamoto Hirotsugu
    • Journal Title

      SID Symposium Digest of Technical Papers

      Volume: 54 Pages: 109~112

    • DOI

      10.1002/sdtp.16500

    • Peer Reviewed
  • [Journal Article] Analysis of floating distance of arc 3D display with respect to inclination angle of substrate2023

    • Author(s)
      Oishi Hiroto、Fujii Kengo、Yasugi Masaki、Suyama Shiro、Yamamoto Hirotsugu
    • Journal Title

      Optical Review

      Volume: 30 Pages: 637~646

    • DOI

      10.1007/s10043-023-00841-9

    • Peer Reviewed
  • [Journal Article] Method of acquiring shapes using motion capture of aerial images formed by large acrylic panels2023

    • Author(s)
      Adachi Mayu、Yasugi Masaki、Suyama Shiro、Yamamoto Hirotsugu
    • Journal Title

      Optical Review

      Volume: 30 Pages: 647~656

    • DOI

      10.1007/s10043-023-00844-6

    • Peer Reviewed
  • [Journal Article] Reducing thickness of long-distance aerial display system in AIRR using Fresnel lens2023

    • Author(s)
      Sakane Shinya、Suyama Shiro、Yamamoto Hirotsugu
    • Journal Title

      Optical Review

      Volume: 30 Pages: 657~663

    • DOI

      10.1007/s10043-023-00845-5

    • Peer Reviewed
  • [Journal Article] Image Switching Methods for an Arc 3D Display Using Projectors and Its Optimal Pixel Structure2023

    • Author(s)
      Mizushina Haruki、Taguchi Haruto、Seko Kazuki、Nishiyama Shingo、Suyama Shiro、Yamamoto Kenji
    • Journal Title

      Proc. of IEEE IAS

      Volume: - Pages: 1~7

    • DOI

      10.1109/IAS54024.2023.10406372

    • Peer Reviewed
  • [Journal Article] Improvement of Perceived Depth Degradation by Motion Parallax in Binocular Stereopsis With Left-Right Retinal Image Mismatch2023

    • Author(s)
      Mizushina Haruki、Fukuta Yusuke、Suyama Shiro、Yamamoto Kenji
    • Journal Title

      IEEE Transactions on Industry Applications

      Volume: 59 Pages: 7813~7821

    • DOI

      10.1109/TIA.2023.3302275

    • Peer Reviewed
  • [Journal Article] Gesture recognition using deep-learning in single-pixel-imaging with high-frame-rate display with latent random dot patterns2023

    • Author(s)
      Takatsuka Hiroki、Yasugi Masaki、Suyama Shiro、Yamamoto Hirotsugu
    • Journal Title

      Optical Review

      Volume: 31 Pages: 116~125

    • DOI

      10.1007/s10043-023-00848-2

    • Peer Reviewed
  • [Journal Article] Evaluation of usability improvement of contactless human interface with visual, auditory, and tactile sensation for aerial display2023

    • Author(s)
      Terao Yasunori、Mizushina Haruki、Yamamoto Kenji
    • Journal Title

      Optical Review

      Volume: 31 Pages: 126~133

    • DOI

      10.1007/s10043-023-00853-5

    • Peer Reviewed
  • [Journal Article] 空中ディスプレイ技術とその知覚認知に関する研究動向2023

    • Author(s)
      水科 晴樹
    • Journal Title

      視覚の科学

      Volume: 44 Pages: 44~48

    • DOI

      10.11432/jpnjvissci.44.44

  • [Presentation] Aerial display by use of plane-symmetric real-image forming optics and its modulation transfer function2024

    • Author(s)
      Hirotsugu Yamamoto, Kazuaki Takiyama, Kenichiro Masaoka, Shiro Suyama
    • Organizer
      Ultra-High-Definition Imaging Systems VII in SPIE Photonics West 2024
    • Int'l Joint Research / Invited
  • [Presentation] Principles of Aerial Display and its Applications for AR/VR/MR in Real Space2024

    • Author(s)
      Hirotsugu Yamamoto
    • Organizer
      SID UCF Student Chapter Meeting
    • Int'l Joint Research / Invited
  • [Presentation] 空中ディスプレイ技術の概要と社会実装の動向2024

    • Author(s)
      山本裕紹
    • Organizer
      光技術動向調査委員会 特別講演(光産業技術振興協会)
    • Invited
  • [Presentation] 360度3D像を表示できる線刻型立体方式の提案と製作2024

    • Author(s)
      川上亜玖吾,奥山大輔,水科晴樹,陶山史朗,山本健詞
    • Organizer
      HODIC学生シンポジウム2024
  • [Presentation] 大型平面フォグスクリーンに2次元画像を投影した際に生じる奥行き知覚と臨場感の評価2024

    • Author(s)
      梅本真己,水科晴樹,山本健詞
    • Organizer
      HODIC学生シンポジウム2024
  • [Presentation] 撮影条件によって生じる書き割り効果と運動視差の低減効果との関係の評価2024

    • Author(s)
      高橋宏輔,水科晴樹,陶山史朗,山本健詞
    • Organizer
      HODIC学生シンポジウム2024
  • [Presentation] 空中ディスプレイの概要と応用展望 -次世代インターフェース産業の創出と国際競争力強化に向けて-2024

    • Author(s)
      山本裕紹
    • Organizer
      JEITA 電子ディスプレイ 標準化活動報告会2023
    • Invited
  • [Presentation] 平面空中像の立体感を向上させるための基礎的な評価2024

    • Author(s)
      斎藤健太,水科晴樹,山本健詞
    • Organizer
      日本光学会情報フォトニクス研究グループ第22回関西学生研究論文講演会
  • [Presentation] Society5.0に向けて社会実装が加速する空中ディスプレイ技術の動向2023

    • Author(s)
      山本裕紹
    • Organizer
      Display Vision報告会(一般社団法人 電子情報技術産業協会 ディスプレイデバイス部会 ディスプレイデバイス統括委員会)
    • Invited
  • [Presentation] 空中ディスプレイの原理と社会実装の最新動向2023

    • Author(s)
      山本裕紹
    • Organizer
      ビジョンチップ協議会定期セミナー
    • Invited
  • [Presentation] Glass-Free Non-Contact Augmented Reality Interface With Aerial Imaging by Retro-Reflection (AIRR)2023

    • Author(s)
      Hirotsugu Yamamoto
    • Organizer
      DH2023 in Optica Imaging Congress
    • Int'l Joint Research / Invited
  • [Presentation] Evaluation of appropriate feedbacks on operating aerial display in three senses: Tactile by vibration to sole of foot, visual and auditory2023

    • Author(s)
      Yasunori Terao, Haruki Mizushina, Kenji Yamamoto
    • Organizer
      IMID 2023
    • Int'l Joint Research
  • [Presentation] Increasing vection strength by adding expanding grating at periphery of visual field2023

    • Author(s)
      Kohsuke Nakanishi, Haruki Mizushina, Kenji Yamamoto
    • Organizer
      IMID 2023
    • Int'l Joint Research
  • [Presentation] Motion parallax can improve perceived depth instability in stereo images with left-right size mismatch2023

    • Author(s)
      Haruki Mizushina, Yusuke Fukuta, Shiro Suyama, Kenji Yamamoto
    • Organizer
      IMID 2023
    • Int'l Joint Research / Invited
  • [Presentation] Realization and evaluation of accurate depth perception by stereo DFD (Depth-fused 3D) rendering in multilayer stereo display2023

    • Author(s)
      Yuto Morishita, Munekazu Date, Ayumi Matsumoto, Masaki Kitahara, Haruki Mizushina, Shiro Suyama, Kenji Yamamoto
    • Organizer
      IMID 2023
    • Int'l Joint Research
  • [Presentation] Evaluation of the visual effect of a blur filter on a highly compressed stereo image with a quality difference between the left and right images2023

    • Author(s)
      Naoto Nakayama, Haruki Mizushina, Kenji Yamamoto
    • Organizer
      IMID 2023
    • Int'l Joint Research
  • [Presentation] Principles of Aerial Display and its Applications for AR/VR2023

    • Author(s)
      Hirotsugu Yamamoto
    • Organizer
      IMID 2023
    • Int'l Joint Research / Invited
  • [Presentation] Introduction of Aerial DisplayTechnology - Short presentation and demonstration -2023

    • Author(s)
      Hirotsugu Yamamoto, Kohei Kishinami
    • Organizer
      University of Arizona
    • Int'l Joint Research / Invited
  • [Presentation] リニアブレンディングを用いた多視点DFD(Depth-fused 3D)レンダリング2023

    • Author(s)
      森下雄登, 伊達宗和, 水科晴樹, 陶山史朗, 山本健詞
    • Organizer
      2023年第3回ホログラフィック・ディスプレイ研究会
  • [Presentation] 運動視差による書き割り効果低減において画像切り替え間隔と頭部運動範囲が与える影響2023

    • Author(s)
      高橋宏輔,水科晴樹,陶山史朗,山本健詞
    • Organizer
      日本視覚学会2023年夏季大会
  • [Presentation] 映像視野周辺部へのランダムドット視覚映像の合成によるベクション強度増大の試み2023

    • Author(s)
      中西康介,水科晴樹,山本健詞
    • Organizer
      日本視覚学会2023年夏季大会
  • [Presentation] ドット群のステレオ画像を用いたセキュリティ表示において視差量とドット密度が覗き見耐性に及ぼす影響2023

    • Author(s)
      井上瑛人,水科晴樹,山本健詞
    • Organizer
      第23回情報フォトニクス研究グループ研究会
  • [Presentation] バイラテラルフィルターを用いた画質差のあるステレオ画像の評価2023

    • Author(s)
      中山尚人,水科晴樹,山本健詞
    • Organizer
      映像情報メディア学会立体メディア技術研究会
  • [Presentation] 空中ディスプレイの操作における空中像と多感覚フィードバックの提示位置のずれの影響の評価2023

    • Author(s)
      寺尾保範,水科晴樹,山本健詞
    • Organizer
      電子情報通信学会ヒューマン情報処理研究会
  • [Presentation] Image switching methods for an arc 3D display using projectors and its optimal pixel structure2023

    • Author(s)
      Haruki Mizushina, Haruto Taguchi, Kazuki Seko, Shingo Nishiyama, Shiro Suyama, Kenji Yamamoto
    • Organizer
      2023 IEEE Industry Applications Society Annual Meeting
    • Int'l Joint Research
  • [Presentation] 電子部品・デバイス技術が広げる “空中ディスプレイ”の可能性2023

    • Author(s)
      山本裕紹
    • Organizer
      CEATEC Tech-Hub
    • Invited
  • [Presentation] 空中ディスプレイ (1) -定義と各種光学系-2023

    • Author(s)
      山本裕紹
    • Organizer
      光とレーザーの科学技術フェア2023
    • Invited
  • [Presentation] 空中ディスプレイ (2) -社会実装の動向-2023

    • Author(s)
      山本裕紹
    • Organizer
      光とレーザーの科学技術フェア2023
    • Invited
  • [Presentation] 空中ディスプレイの基礎/技術のポイントおよび最新動向2023

    • Author(s)
      山本裕紹
    • Organizer
      Sumken技術セミナー
    • Invited
  • [Presentation] 円錐形アーク3D表示における視点位置に対応した異なる3D像の表示2023

    • Author(s)
      川上亜玖吾,奥山大輔,水科晴樹,陶山史朗,山本健詞
    • Organizer
      Optics & Photonics Japan 2023
  • [Presentation] Effects of motion parallax smoothness and head moving range on reduction of the cardboard effect2023

    • Author(s)
      Kosuke Takahashi, Haruki Mizushina, Shiro Suyama, Kenji Yamamoto
    • Organizer
      IDW '23/3DSA 2023
    • Int'l Joint Research
  • [Presentation] Multi-view DFD (Depth-Fused 3D) rendering with linear blending2023

    • Author(s)
      Yuto Morishita, Munekazu Date, Haruki Mizushina, Shiro Suyama, Kenji Yamamoto
    • Organizer
      IDW '23/3DSA 2023
    • Int'l Joint Research
  • [Presentation] Evaluation on usability of aerial display by changing the timing of providing multimodal feedback2023

    • Author(s)
      Yasunori Terao, Haruki Mizushina, Kenji Yamamoto
    • Organizer
      IDW '23/3DSA 2023
    • Int'l Joint Research
  • [Presentation] Increasing vection strength by adding optical flow with random dots in the peripheral visual field2023

    • Author(s)
      Kosuke Nakanishi, Haruki Mizushina, Kenji Yamamoto
    • Organizer
      IDW '23/3DSA 2023
    • Int'l Joint Research
  • [Presentation] Emergency-drill online visual system to build ability against unexpected situations2023

    • Author(s)
      Kyosuke Takahashi, Akua Kawakami, Masaki Umemoto, Kousuke Takahashi, Yuuya Sasai, Yasunori Terao, Kousuke Nakanishi, Naoto Nakayama, Yuuto Morishita, Akito Inoue, Shuto Ogura, Kenta Saito, Yuta Machigashira, Kotomi Nakanishi, Haruki Mizushina, Kenji Yamamoto, Hitoshi Inomo
    • Organizer
      IDW '23/3DSA 2023
    • Int'l Joint Research
  • [Presentation] Emergency-drill scenarios to build ability against unexpected situations on tsunami2023

    • Author(s)
      Kenji Yamamoto, Masaki Umemoto, Akua Kawakami, Kousuke Takahashi, Yuuya Sasai, Yasunori Terao, Kousuke Nakanishi, Naoto Nakayama, Yuuto Morishita, Akito Inoue, Shuto Ogura, Kenta Saito, Yuta Machigashira, Kotomi Nakanishi, Kyosuke Takahashi, Hitoshi Inomo, Haruki Mizushina
    • Organizer
      IDW '23/3DSA 2023
    • Int'l Joint Research
  • [Presentation] Emergency drill using online visual system2023

    • Author(s)
      Hitoshi Inomo, Akua Kawakami, Masaki Umemoto, Kousuke Takahashi, Yuuya Sasai, Yasunori Terao, Kousuke Nakanishi, Naoto Nakayama, Yuuto Morishita, Akito Inoue, Shuto Ogura, Kenta Saito, Yuta Machigashira, Kotomi Nakanishi, Kyosuke Takahashi, Haruki Mizushina, Kenji Yamamoto
    • Organizer
      IDW '23/3DSA 2023
    • Int'l Joint Research
  • [Presentation] Encoding of Stereo Images Using Bilateral Filters and Different Compression Ratio for Limited Communication Bandwidth2023

    • Author(s)
      Naoto Nakayama, Haruki Mizushina, Kenji Yamamoto
    • Organizer
      IDW '23/3DSA 2023
    • Int'l Joint Research
  • [Presentation] Aquatic Display That Forms a Real Image in Water2023

    • Author(s)
      Hirotsugu Yamamoto
    • Organizer
      DHIP2023
    • Int'l Joint Research / Invited
  • [Presentation] 空中ディスプレイの基礎と応用展開 -光学系の考え方・最新動向から今後要求される素材まで-2023

    • Author(s)
      山本裕紹
    • Organizer
      ナノ構造ポリマー研究協会
    • Invited

URL: 

Published: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi