Remote communication support interface of naturally conveys the work of the mind

2023 Fiscal Year Final Research Report

• Project/Area Number: 21K17841
• Research Category: Grant-in-Aid for Early-Career Scientists
• Allocation Type: Multi-year Fund
• Review Section: Basic Section 61060:Kansei informatics-related
• Research Institution: The University of Electro-Communications (2023); Gunma University (2021-2022)
• Principal Investigator: Matsuno Shogo 電気通信大学, 大学院情報理工学研究科, 准教授 (60836245)
• Project Period (FY): 2021-04-01 – 2024-03-31
• Keywords: 視線計測 / コミュニケーション支援 / マルチモーダルインタフェース / バーチャルリアリティ / 共感性

Outline of Final Research Achievements

We developed a human interface for remote communication that activates nonverbal interaction and promotes mutual sharing of information and qualitative improvement of communication by estimating changes in the user's emotions and attitudes based on measured biometric information and providing feedback to communication as sensory information. Moreover, we established a quantitative evaluation index of emotional information transfer in remote communication and developed an input interface that supports communication in a virtual space using the index.

Free Research Field

感性情報学

Academic Significance and Societal Importance of the Research Achievements

パンデミックにより遠隔コミュニケーションの重要性が増した現代において，仮想空間におけるコミュニケーション手段の重要性は高まっている． 仮想空間では現実空間と遜色のないコミュニケーションを期待されるが，現実には技術的制約から現実のような繊細な感情の機微を伝えることは困難である．本研究の成果として，眼球運動を計測することで集中，緊張といった心理状態の推定が可能であることを明らかにしたため，仮想空間におけるコミュニケーションデザインにおいて，随意的なコマンドによる感情表現をせずとも非随意な生理指標によって感情表現を行うことで，自然なコミュニケーションを促進する効果を期待できる．