Development of new haptic-audio-visual experiences by constructing remote sound drawing methods using mixed reality
| Project/Area Number |
21K00234
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (C)
|
| Allocation Type | Multi-year Fund |
|---|
| Section | 一般 |
|---|
| Review Section |
Basic Section 01070:Theory of art practice-related
|
|---|
| Research Institution | Nagoya City University |
|---|
Principal Investigator |
中川 隆 名古屋市立大学, 大学院芸術工学研究科, 准教授 (60631124)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
古川 聖 東京藝術大学, 美術学部, 教授 (40323761)
大村 英史 東京理科大学, 創域理工学部情報計算科学科, 講師 (90645277)
|
|---|
| Project Period (FY) |
2021-04-01 – 2024-03-31
|
| Project Status |
Completed (Fiscal Year 2023)
|
| Budget Amount *help |
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2023: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2022: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2021: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
|
|---|
| Keywords | 遠隔コミュニケーション / 視聴触覚体験 / Mixed Reality / メディアアート / 芸術表現 / XR |
|---|
| Outline of Research at the Start |
本研究は研究代表者らによる2018-2020年度実施の基盤研究(C)「複合現実における空間音描手法の開拓」に直接接続し、当手法を拡張・展開させるものである。具体的には前研究成果を基盤に、1)遠隔通信に特化した新手法の構成的検討、2)半導体熱電素子・筋電気刺激等を用いた空間音描に触れることを可能にするデバイスの開発、3)1, 2の作業の統合による複数人参加型遠隔空間音描手法の構築、および、4)行動認識アルゴリズムを用いた体験者の動作の定量的抽出を実施し、表現手法の実装と分析データ面の双方から新規空間音描手法の特質を明らかにする。
|
| Outline of Annual Research Achievements |
2023（令和5）年度の成果概要は以下の通りである。
【複数人参加型遠隔空間音描手法の構築】前年度までに構築した表現手法をブラッシュアップし、複数人参加型遠隔空間音描手法を構築した。【システムの検証・更新】制作した複数人参加型遠隔空間音描手法の操作性および表現可能性について検証作業を行った。（操作性について）デバイスのキャリブレーションに時間がかかるものの、キャリブレーション後は、すべての参加者がインストラクターの教示の下、5~10分程度で基本操作に慣れ、遠隔空間音描を体験することができた。（触覚デバイスについて）光学シースルー方式のMRデバイスとの相性等、課題が新たに浮上したため、引き続き構成的に検討する必要がある。（遠隔空間音描の表現可能性について）複合現実空間における「音響生成」と「描く行為」との融合可能性を「空間音描」と称し、それを遠隔で体験する手法について構成的に検討をおこなってきたが、そのアイデアについて、ほぼ全ての体験者からポジティブな意見を得ることができた。検証作業で得られた体験者からのフィードバックをもとにして、改善作業を行った。【最終年度の作品発表】制作した作品を内外の学会・コンペティション（SIGGRAPH ASIA 2023, XR CREATIVE AWARD 2023）に投稿した。SIGGRAPH ASIA 2023では、開催地のシドニーと名古屋を本手法で繋いだ遠隔空間音描を実演し、有意義なフィードバックを得ることができた。
|
Report
(3 results)
Research Products
(18 results)
