2022 Fiscal Year Annual Research Report
Can co-creation value in interpersonal services be measured from spoken nonverbal information?
| Project/Area Number |
22H03693
|
|---|
| Allocation Type | Single-year Grants |
|---|
| Research Institution | University of Tsukuba |
|---|
Principal Investigator |
善甫 啓一 筑波大学, システム情報系, 助教 (70725712)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
岡田 幸彦 筑波大学, システム情報系, 教授 (80432053)
前田 祐佳 筑波大学, システム情報系, 助教 (20650542)
プエンテス サンドラ 筑波大学, システム情報系, 助教 (00725765)
三浦 智史 国立研究開発法人国立がん研究センター, 東病院, 科長 (20643464)
小杉 和博 国立研究開発法人国立がん研究センター, 東病院, 医員 (30818448)
|
|---|
| Project Period (FY) |
2022-04-01 – 2026-03-31
|
| Keywords | 対人コミュニケーション / 音声非言語情報 / 価値共創 / ストレス |
|---|
| Outline of Annual Research Achievements |
研究を遂行するための基盤を以下のように整え，また得られた基礎的な知見に基づく実験の成果発表を行った。
課題#A［小売店におけるバイタル付きVCCプロセスの収集］に関して，サービス提供者のサービス生産活動を計測するための実験室およびVR空間内に模擬店舗を用意した。そこでの実験を通して，熟練サービス提供者の特徴を計測・抽出を行った。その結果，相槌やジェスチャーなど非言語を使ったコミュニケーションにおいて特徴的な傾向が確認された。
また，fNIRSを活用してサービス消費中の脳活動を計測するための手段を確認した。予備的な実験を通して価値共創プロセスに大きな影響を与える相手への信頼感を客観的に計測できる可能性が示唆された。
課題#B［高ストレス時の音声・詳細バイタル付き価値共創データの収集］に関して，国立がんセンター東病棟にて仮設したマルチモーダルな計測を行うスマート診察室SCOUTERの動作確認を行い，模擬患者を対象に模擬診察を行った。この診察を通して，模擬診察中の映像，呼吸，脈波関連信号，体表面温度，深度画像，それぞれの音声を含む合計36施行の高ストレス時のデータの収集を行った。
課題#C［音声の非言語情報から共創価値を推測するモデル］に関して，既存のデータセットを用いる感情推定モデルを作成した。また，診察中の不安・感情を振り返りながら保存ができるアノテーションソフトウェアを作成した。このソフトウェアを活用して，上記模擬診察中の感情のアノテーションを行った。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
いずれの課題を担当する班も想定通りの進捗である。
|
| Strategy for Future Research Activity |
本年度準備した基盤を元に，介入効果やデータ解析を行う。
課題#A［小売店におけるバイタル付きVCCプロセスの収集］に関して，抽出された熟練サービス提供者のスキルを新人サービス提供社に介入させた際の効果を検証する。
また，fNIRSを活用した相手への信頼感の計測手法を確立するために大人数の実験協力者を募り実験を行う。
課題#B［高ストレス時の音声・詳細バイタル付き価値共創データの収集］に関して，模擬患者を対象に模擬診察を行ったデータの解析を行い，医師と患者の間で起こる作用のモデル化を試みる。
課題#C［音声の非言語情報から共創価値を推測するモデル］に関して，アノテーションソフトウェアで得られたデータを元に，非言語情報から競争価値を推測するモデルの試作を行う。
|
