2022 Fiscal Year Annual Research Report
Coordination dynamics of neural, bodily, physiological activities and their relationship to creative interaction
| Project/Area Number |
20H03553
|
|---|
| Research Institution | University of Toyama |
|---|
Principal Investigator |
野澤 孝之 富山大学, 学術研究部工学系, 教授 (60370110)
|
|---|
| Project Period (FY) |
2020-04-01 – 2023-03-31
|
| Keywords | 創造的コミュニケーション / マルチモーダルセンシング / ハイパースキャニング / メタスタビリティ / 脳活動信号処理 |
|---|
| Outline of Annual Research Achievements |
脳，身体，生理活動の個人間の同調は，コミュニケーションの「質」を反映する特徴量として，そのメカニズムと応用可能性に関心が寄せられている．しかしこれらの同調現象はこれまでモダリティ毎に個別に研究され，相互の関係は明らかにされていない．また多くの研究で同調現象は時間的に定常的な視点で扱われてきた．これに対して本研究は，動的に変化する創造的コミュニケーション・インタラクションを対象に，参加者の脳・身体・生理活動を同時計測し，マルチモーダルな同調ダイナミクス間の関係と集団的創造過程への貢献を明らかにするものである．
計画3年目(最終)の2022年度から新型コロナウイルス感染症の影響のため延長を申請し認められた2023年度は，マルチモーダル同時センシングの手法について，より幅広いセンシング情報の取り込み，多人数相互作用や遠隔コミュニケーションなどより幅広い場面に利用し易くする拡張，マルチモーダル情報をリアルタイムに評価しそれを当事者へのフィードバックに活用可能にする等の技術拡張を行った．対面および遠隔でのコミュニケーション／インタラクション実験を進め．既得のデータとともに分析を行った．とくに，これまで主な分析対象であった非言語的活動に加え，大規模言語モデルを用いた創造的コミュニケーションの言語的・意味的ダイナミクス分析も開発し，その有効性を確かめた．
コミュニケーションにおける笑顔表情の同調がもたらす効果についての論文，コミュニケーションにおける自身の非言語活動をアバター技術でフィードバックしメタ認知に働きかけることの効果についての論文が国際学術雑誌に掲載されたほか，プレプリントや多数の学会発表で成果を発表し，複数の発表について優秀講演賞も受賞した．
|
| Research Progress Status |
令和4年度が最終年度であるため、記入しない。
|
| Strategy for Future Research Activity |
令和4年度が最終年度であるため、記入しない。
|
