2022 Fiscal Year Research-status Report
感性情報からユーザの嗜好を獲得するインタラクティブエージェントの実現
| Project/Area Number |
20K19905
|
|---|
| Research Institution | Nagoya Institute of Technology |
|---|
Principal Investigator |
佐久間 拓人 名古屋工業大学, 工学(系)研究科(研究院), 助教 (20753627)
|
|---|
| Project Period (FY) |
2020-04-01 – 2024-03-31
|
| Keywords | 顔表情および音声からの感情推定 / ヒューマンエージェントインタラクション |
|---|
| Outline of Annual Research Achievements |
本研究は音声からの感情推定を用いてユーザの嗜好を獲得し，インタラクションにユーザの好みを反映することが出来るエージェントの構築，およびエージェントに対する印象を向上させることを目的としている．
3年次の成果として特筆すべきものは感情推定・感情表現に関する技術が挙げられる．本研究課題において感情推定はユーザの嗜好学習における要素の一つであり，特に音声からの感情推定が提案システムに組み込まれている．また，ユーザが自然な感情表現であると感じるような技術開発もユーザへ出力する行動価値関数の学習，ならびに感情推定も含めた感情モデルの構築にとって重要な技術である．
これまでに引き続き音声と表情から感情推定するモデルの改良に取り組んでいるが，特に感情表現に関する研究の成果が徐々に出始めている．ロボットの身体で感情を表現する研究や，文章から推定した絵文字に基づき応答表情を表出するインタラクティブエージェントに関する研究成果を発表した．また，ドメイン適応によって脳波データの個人差を吸収し，感情推定モデルの精度を向上させた研究成果も発表した．
そのほか，商品配置最適化アルゴリズムが算出した最適化後の配置をより正しく評価するためのシミュレータ開発に関する研究発表を国際会議（IEA/AIE 2022）にて行った．感情モデルとは直接の関係は無いものの，本研究でも取り扱うマルチエージェントシステムおよびシミュレータ作成に関する知見の獲得に寄与した研究である．提案したシミュレータは共同研究先から提供頂いたデータから実倉庫におけるピッキングカートの動作を再現することを目的として開発を進めていた．改良の余地はあるものの，共同研究先の方々に納得して頂ける成果を出すことに成功した．
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
被験者実験を伴わない感情推定モデルの構築に関する研究は進展が見られたが，COVID-19の影響もあり，当初予定していた被験者の主観評価による感性評価実験は現時点においても小規模なものにとどまっている．感情表現に関する研究や，商品配置最適化アルゴリズムのためのマルチエージェントシミュレータ開発など，成果を残した研究も見られるが，本研究課題に対する進捗状況はやや遅れていると判断した．
|
| Strategy for Future Research Activity |
今後は本研究が対象としている報酬付与時の音声を用いた感情認識に取り組みたい．大規模言語モデルの発達が顕著であり，音声からの言語認識によって大規模言語モデルを利用した感情認識モデルの構築を模索中である．そのためにはデータ収集から取り組まねばならず，COVID-19の影響によって面着実験の実施は困難であるため，主観評価実験無しで収集する方法を模索中である．現在は国立情報学研究所の音声資源コンソーシアムにて公開されている「感情評定値付きオンラインゲーム音声チャットコーパス (OGVC)」の利用を考えているが，より良いコーパスの探索も続けていく．
また，既に着手しているが，実機ロボットへの応用を目指したアプローチの一つとして，リアルタイムかつ直感的に実機ロボットを制御可能な技術であるAssociative Motion Generation（AMG）の改良を進める．
|
| Causes of Carryover |
COVID-19の影響によって学会等における旅費が見込めなかったため，計算機購入費用，実験用機材費，論文投稿用費用として使用する予定であったが，世界的な半導体不足の影響もあり当該年度中の執行が困難であることが見込まれたため高額な高性能計算機の購入を次年度に持ち越すこととした．それに伴い次年度使用額が生じたものである．
使用計画は購入を見送った高性能計算機，学会等の旅費，論文投稿費，および実験用ロボットである．
|
