2003 Fiscal Year Annual Research Report
| Project/Area Number |
13680443
|
|---|
| Research Institution | Nagoya Institute of Technology |
|---|
Principal Investigator |
佐藤 淳 名古屋工業大学, 工学研究科, 助教授 (20303688)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
佐藤 幸男 名古屋工業大学, 工学研究科, 教授 (80134790)
|
|---|
| Keywords | 音響視覚インターフェース / 視覚認識 / 音響制御 / 複合現実感 / 相互投影 |
|---|
| Research Abstract |
本年度は、昨年度までの研究により確立した視覚音響空間の弱校正法と、カメラ同士の相互投影を用いたカメラ校正法とを組み合わせることにより、複数カメラと複数音場における視覚空間と音響空間の融合法を開発し、複数のユーザによる視覚音響空間の共有を実現した。
複数のユーザが一つの視覚音響空間を共有するためには、複数のユーザがそれぞれ持っているカメラ画像の空間(視覚空間)と音響装置の空間(音響空間)を統合するよう空間の幾何学的な校正を行う必要がある。一般に複数ユーザ間の視覚空間の校正は、空間中のマーカーや自然特徴点の対応をもとに行うが、正確に校正することは容易ではないことが知られている。これに対して昨年度の研究において、複数のカメラ同士を相互に投影し合うことにより、この幾何学的な校正が少ない対応点から高精度に行えることを明らかにした。そこで本年度はこの相互投影に基づくカメラ校正法を視覚と音響による複合現実感に応用し、カメラの相互投影を用いて複数の視覚空間と複数の音響空間を弱校正する方法を開発した。特に、HMDに取り付けたカメラを複数ユーザ間で相互に投影し合うことにより、最低3点の特徴点から、時々刻々と変化する複数ユーザのHMDカメラ間の幾何学的な関係をリアルタイムに高精度に計算し、3次元空間中の仮想物体と仮想音源をそれぞれのユーザの視点カメラとヘッドホンに投影して提示することに成功した。
開発した手法を用いて、複数のユーザ同士が仮想的な世界の中でスターウォーズ対戦などを実体験することのできる複合現実感システムを構築した被験者を使って実験を行った結果、複数のユーザ同士で視覚空間と音響空間が共有でき、かつこれらの空間の弱校正が正確に行われていることから、非常に高い臨場感が得られることを確認した。
|
-
[Publications] J.Sato: "Recovering Epipolar Geometry from Mutual Projections of Multiple Cameras"Proc.Australia-Japan Advanced Workship on Computer Vision. 111-117 (2003)
-
[Publications] J.Sato: "Recovering Multiple View Relations from Mutual Projections of Multiple Cameras"Proc.Asian Conference on Computer Vision. Vol.1. 7-12 (2004)
-
[Publications] 河合潤也, 佐藤 淳: "複数ユーザカメラの相互投影を用いた3次元復元と複合現実空間の共有"第10回画像センシングシンポジウム講演論文集. (2004)
-
[Publications] 杉村良彦, 佐藤 淳: "未校正マルチカメラの相互投影を用いた弱校正と物体形状の復元"情報処理学会研究報告(2003-CVIM-140). Vol.2003, No.88. 17-24 (2003)
