2022 Fiscal Year Annual Research Report
Low-Latency Vision Enhancement by Integrating High-Speed Human and Environment Measurement with Field-of-view Prediction
| Project/Area Number |
22J01340
|
|---|
| Allocation Type | Single-year Grants |
|---|
| Research Institution | The University of Tokyo |
|---|
Principal Investigator |
廣井 裕一 東京大学, 情報学環, 特別研究員(PD)
|
|---|
| Project Period (FY) |
2022-04-22 – 2025-03-31
|
| Keywords | 低遅延視覚拡張 / 拡張現実感 / 光学歪み較正 / ニューラルレンダリング |
|---|
| Outline of Annual Research Achievements |
低遅延な視覚拡張技術の確立に向けて、今年度は以下の進捗があった。
■視覚計測に基づく視覚刺激の提示システム：低遅延な視覚拡張には、視野に提示すべき視覚刺激を高精細に計算し、ディスプレイ上で提示するシステムが必要である。今年度は、ユーザの視線位置・方向を計測し、それに応じたステレオ映像を深層学習により生成し、ディスプレイ上に提示するシステムを設計した。
■接眼ディスプレイ上の高精度な空間較正：視覚拡張には、実環境に対して空間的にズレのない映像提示が必要である。今年度は、頭部搭載型ディスプレイ(Head Mounted Display, HMD)において、視線位置・方向に応じて変化する提示画像の歪みを深層学習により高速にシミュレートする手法を提案した。
■低遅延な映像提示が可能な接眼ディスプレイ：低遅延な視覚拡張には、眼前に映像を低遅延で投射するディスプレイシステムが必要である。今年度は、ステアリングミラーと位置センシング素子による同軸光学系を使用し、眼前に低遅延で映像を投射するディスプレイシステムを設計した。
これらの成果を統合することで、本研究の要素技術の一つである「実際の変化に先んじて視野に提示すべき視覚刺激を計算し、接眼ディスプレイ上で低遅延に提示するシステム」が実現される。成果として、光学分野のトップ国際論文誌に1件掲載され、バーチャルリアリティに関する査読付き国際会議に1件採録され、さらに1件が国際論文誌で査読中である。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
研究計画において記載した研究項目のうち、「空間的整合性を保った視覚刺激の高速な生成」に向けた要素技術となる研究が順調に進展している。
|
| Strategy for Future Research Activity |
本年度の研究は、主に低遅延視覚拡張に向けたハードウェアおよびディスプレイシステムに関する成果が主であった。今後の研究として、本年度に確立したディスプレイシステムの要素技術を統合し、低遅延な視覚拡張システムに向けたディスプレイのプロトタイプを実装する。また、ソフトウェア部分の研究項目である「視覚の高速度計測」および「装着者の視界変化予測」に関しても、当初の計画通り研究を推進する。
|
