2019 Fiscal Year Research-status Report
A proof-of-concept study of augmented cross-modality in VR space
| Project/Area Number |
18K11411
|
|---|
| Research Institution | Waseda University |
|---|
Principal Investigator |
河合 隆史 早稲田大学, 理工学術院, 教授 (90308221)
|
|---|
| Project Period (FY) |
2018-04-01 – 2021-03-31
|
| Keywords | バーチャルリアリティ / クロスモダリティ / 生体情報 / ユーザ体験 |
|---|
| Outline of Annual Research Achievements |
本研究では、VRにおけるヒューマンインタフェース／インタラクションの構築にかかるアプローチとしてクロスモダリティに着目し、新たな概念としての「拡張クロスモダリティ」を提案する。拡張クロスモダリティとは「所望する感覚や体験に伴う生体情報を、感覚刺激として表現・付加して呈示する」アプローチと定義する。拡張クロスモダリティによって、VR空間で生起される感覚・体験強度の増進やアプリケーションの明確化について、実証実験を通して検討を行うことが、本研究の目的である。
次年度は、当初計画に従い、他者の生体情報や周囲環境を計測し、感覚情報として表現する「憑依」様体験の実験系の構築に取り組んだ。憑依する他者としてフェンシング選手を選定し、まず、VRカメラに向かってシャドーフェンシングを求めた。次に、その様子をVR空間に再現し、当該選手に自身との対戦を求め、その間の生体情報を測定した。具体的には当該選手の頭部や視線、手や腕の動き、心拍を測定するとともに、試合中の周囲環境の見え方や音の聴こえ方の主観的な変化についてインタビューを行った。さらに、得られたデータを分析・統合し、VRコンテンツとして体験可能なフォーマットに変換することで実験系を構築した。
構築した実験系では、参加者がヘッドセットを装着すると、眼の前にフェンシング選手が立っており、試合が開始するとVR空間の中で剣を持った自身の手と測定した選手の動きが徐々に混在していき、重畳表示された注視点が参加者の視線を選手の視線に近似させるよう誘導する。その他、視野の狭窄や心拍の上昇など映像・音響によるエフェクトによって、対戦中のアスリートの生体情報や周囲環境の変化を表現した。
|
| Current Status of Research Progress |
Current Status of Research Progress
1: Research has progressed more than it was originally planned.
Reason
当初の計画では、今年度は他者の生体情報や周囲環境を計測し、感覚情報として表現する「憑依」様体験の実験系の構築を目指すこととした。憑依する対象として、本学オリンピック・パラリンピック事業推進室と連携し、本学フェンシング部の協力を得ることで、優れたアスリートの特徴的な認知体験を選定することができたのは、当初の計画以上の進展と考えられる。加えて、本学稲門祭実行委員会主催による「稲門祭」にて、構築した実験系を、100名を越える参加者に体験してもらうという、アウトリーチ活動も併せて実施することができた。
|
| Strategy for Future Research Activity |
当初計画に従い、拡張クロスモダリティのアプリケーションを設定し、積極的な効果を意図した「憑依」様体験の実験系を構築し、実証実験を通して有効性や要件について明らかにしていく。具体的には、今年度構築したVRコンテンツを用いて、フェンシング選手の特徴的な認知体験の表現・受容による影響について、実験的な検討を行う。
|
