| Project/Area Number |
24K03583
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (C)
|
| Allocation Type | Multi-year Fund |
|---|
| Section | 一般 |
|---|
| Review Section |
Basic Section 01070:Theory of art practice-related
|
|---|
| Research Institution | Institute of Advanced Media Arts and Sciences |
|---|
Principal Investigator |
平林 真実 情報科学芸術大学院大学, メディア表現研究科, 教授 (10508477)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
アレン スコット 京都精華大学, メディア表現学部, 講師 (20836895)
白石 覚也 多摩美術大学, 美術学部, 助手 (20990154)
|
|---|
| Project Period (FY) |
2024-04-01 – 2027-03-31
|
| Project Status |
Granted (Fiscal Year 2024)
|
| Budget Amount *help |
¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
Fiscal Year 2026: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2025: ¥1,950,000 (Direct Cost: ¥1,500,000、Indirect Cost: ¥450,000)
Fiscal Year 2024: ¥1,950,000 (Direct Cost: ¥1,500,000、Indirect Cost: ¥450,000)
|
|---|
| Keywords | Augmented Reality / 暗所 / 音楽体験 / 空間インスタレーション / エンタテイメント空間 / 可視光通信 |
|---|
| Outline of Research at the Start |
本研究では、照明等の光のパターンを利用して暗所におけるAR (Augmented Reality)表現を可能とする手法の実現と、暗所における新たな表現の可能性を探求し、暗所ならでは体験の実現とエンタテインメントやアート領域における新たな表現手法として提供することを目指す。音楽会場や劇場などの空間は薄暗いことが多く、一般的なスマートフォンやHMD による空間認識手法は暗所では安定せずARの実現が難しい。そこで、光通信や画像認識技術を適用し照明装置等をARマーカの代替として利用する手法を実現し、従来困難だった暗い空間においてARを実現し、暗い空間でのAR表現の可能性の探究を行える環境を提供する。
|
| Outline of Annual Research Achievements |
フルカラーLEDテープを用いてARマーカ手法については、システムと基本的な仕組みおよびコンテンツに関しては、LEDの発色光の変化によってIDをエンコードする手法とそのAR表現について実験結果を9月に行われた情報処理学会エンタテインメントシンポジウムにてデモ展示として発表を行った。発表に先立って、7月20日に実施した音楽イベント「NxPC.Live vol.70」にてライブパフォーマンスとの連携実験を行い、これらの結果を発表に反映している。これらの成果をもとにライブパフォーマンスにおけるAR表現の可能性を示すコンテンツとして、ライブ空間に適していると考えられる複数のAR表現を制作し、3月19日に東京のCircus Tokyoにおいて実施した「NxPC.Live vol.73」にて実演を行った。
暗所におけるAR表現手法の探究として、ステージ前方の両サイドに配置されたフルカラーLEDの発光色の変化に対応しステージ空間に対して複数のAR表現により空間演出を行った。ステージの演者を囲むようなもの、空間全体を包むようなもの、オブジェクト等を提示するものを用意し、実際の音楽イベントにおける演出効果を確認するものとなっている。この実演における結果と問題点に対する考察を行い、現在は、その解消手法としてID認識手法の改善や別手法についての開発を進めている。これらの結果については、論文として取りまとめを行い学会での発表の準備を行なっている。
暗所における芸術的な表現としてインスタレーション作品として展開においては、音楽空間に比較して環境の制御がしやすいと利点を生かし、フルカラーLEDによるARマーカ以外にも照明やプロジェクタの利用、インタラクティブな体験の導入などの実験的なアイデアを入れつつ作品企画を行なっている。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
基盤となるシステムについては、今後さらに改善する必要があるが、一定の実演を行うことができるようになっている。これらのシステムは、実際の音楽イベントにおいて実験・実演を行うことで問題点の発見と改良に向けて対策を試みることができており、当初予定していた実験と改良のプロセスを行うことができている。しかし環境による不安定性はあるため改善を進めている。HMDに向けての実装については、機材調達の遅延とビデオパススルー機能への制限のため、実装が遅れていたが、現在開発できる環境が整いつつあり順次進めていく。また、これらの成果については外部発表を行うための準備を進めており、当初の想定したスケジュールと概ね同様に進捗していると考えられる。
AR表現の探究においては、表現として種類を提示し実演することはできてきているが、これらについて考察した上で改良を進める必要がある。これらは音楽イベント等の実演において順次進めていくこととなっており、2年目以降にさらに研究として進むことになる予定である。
基盤となるシステムをより空間的に展開した表現としてインスタレーション作品の企画と実装の準備を進めており、インタラクティブな体験の導入、音楽や音声IDの導入などは2年目の実現と実装に向けて進められている。当初の予定との大きな遅れが生じていない。
|
| Strategy for Future Research Activity |
現状では、ライブ等のエンタテイメント空間において、環境の明るさ等によってシステムが不安定になることがあるため、これらの改善を行う必要がある。また、HMDへの実装と実演による実験を進めていく。
暗所におけるAR表現の探究については、エンタテイメント空間に応じたコンテンツの展開として暗所ならではの表現について試作と探究をさらに行う必要がある。今後も音楽イベント等における実験とフィードバックにより様々なAR表現として展開を行っていくことで考察を深めていきた。
暗所における空間インスタレーション型AR作品としての展開においては、展示として環境を制御しやすい利点を活かし、単純なAR表現からよりインタラクティブな仕組みの導入を検討し、暗所において効果的な体験として表現を高めていく。特に音声等を用いたインタラクションや照明やプロジェクタの導入などの実験的な展示等を行いながら、暗所のおいて有効な体験とは何かを探り、表現としての完成度を高めていく予定である。これらも外部において展示を行うことで評価を行なっていきたい。
|
