2023 Fiscal Year Research-status Report
Development and evaluation of age-dependent degradation detection system using conversation comprehension estimation
| Project/Area Number |
22K04626
|
|---|
| Research Institution | Osaka Institute of Technology |
|---|
Principal Investigator |
脇田 由実 大阪工業大学, ロボティクス&デザイン工学部, 教授 (10590359)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
中藤 良久 九州工業大学, 大学院工学研究院, 教授 (10599955)
松田 千登勢 摂南大学, 看護学部, 教授 (70285328)
|
|---|
| Project Period (FY) |
2022-04-01 – 2025-03-31
|
| Keywords | 衰え推定 / サービス付き高齢者向け住宅 / 日常会話 / ピッチ経時変化度合 / 音声認識性能推定 / 発声速度 / 認識結果変化度合 |
|---|
| Outline of Annual Research Achievements |
1.サービス付き高齢者向け住宅（以降「サ高住」と記載）での会話音声のデータベース化：昨年収録した会話音声とは別のサ高住にて、５名分４会話を追加収録。昨年は我々録音スタッフが会話支援をしながら録音したが、今回はほぼ支援なしで１回３～４分の会話を収録．左記会話に書き起こしとピッチ情報を追加しデータベース化を実施．
2.上記サ高住での会話音声を用いた衰え度合い推定評価の実施：ピッチとパワーの経時変化を用いた衰え推定手法の実用可能性を上記データを用いて評価．昨年までの評価に用いた生活支援を受けていない高齢者会話と、サ高住利用高齢者会話とを比較．提案手法による左記２種の高齢者会話の推定率(accuracy)は約75％であり、本手法が有効である可能性は確認できたが、性能に個人差があることが課題．国際学会に論文投稿中．【IEEE GCCE2024に論文投稿中】
3.音声認識結果情報を加味することによる衰え推定精度向上の試み：これまでの研究よりピッチやパワーの継時変化が衰え推定に有効であることを確認するも、効果に個人差あり．これを解決するため、サ高住会話音声の音声認識性能が他の高齢者会話より低いことを利用し、認識性能を利用して衰え度を推定する手法を提案．発声の不安定さが認識性能を悪化を招くと仮定し，以下２つの方法で認識性能を推定することを試みた．①発声速度の不安定さから推定．②入力音声に僅かな変化を与えた際の認識結果の変化度合から推定．両方法による認識性能推定の可能性を確認．国際学会にて２件を発表。【① HCII2023(2023.7）、② HCII2024 (査読受理済．2024年7月に発表予定）】
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
・サ高住でのオンライン会話の追加収録と音声データベース構築を実施できた。サ高住において、まだコロナ禍以前と同様の条件に戻っていないことにより、収録会話者数が予定より少ないが、目的である衰え推定手法の評価を実施できるデータ量が確保できた．
・上記施設高齢者の音声データと施設を利用していない高齢者音声データとのピッチの継時変化を比較し、両者の違いが確認できたことから、提案する衰え推定手法の有効性が確認できた．
・提案手法で推定が困難な一部の高齢会話者については、音声認識システムを併用し、認識性能を用いて衰え推定を行う別の推定手法を提案できた．
|
| Strategy for Future Research Activity |
・オンライン日常会話から加齢に伴う衰え度合いの推定手法において、提案しているピッチやパワーの継時変化度合を用いた推定手法に加えて、右記方法では推定精度の低い会話者の推定精度を補うために、音声認識機能を併用し、発声の不安定さに起因する音声認識性能の低さから衰え推定を行う新たな手法を確立する．
・ピッチパワーの継時変化、音声認識性能、など複数情報にて推定するシステム全体を設計提案し、性能評価を行う。
|
| Causes of Carryover |
・研究分担者が購入予定であった物品をが予定より高額であったため購入せず、既存物品にて代用して活動した．次年度は、次年度費用分と併せて購入予定．
・高齢者住宅における収録音声のデータベース化作業を人件費と謝礼を要する作業員にお願いするつもりであったが、聞き取り困難な言葉やフィラーの発生がかなり多く、データベース仕様が定まらない問題が発生．仕様を改良変更しながら研究者自らがデータベース化作業を実施．次年度はこの費用を、円安などのため予定より高額となった国際学会出張旅費（7月開催予定のHCII2024）に充てる予定．
|
