感性情報からユーザの嗜好を獲得するインタラクティブエージェントの実現
Project/Area Number |
20K19905
|
Research Category |
Grant-in-Aid for Early-Career Scientists
|
Allocation Type | Multi-year Fund |
Review Section |
Basic Section 61060:Kansei informatics-related
|
Research Institution | Nagoya Institute of Technology |
Principal Investigator |
佐久間 拓人 名古屋工業大学, 工学(系)研究科(研究院), 助教 (20753627)
|
Project Period (FY) |
2020-04-01 – 2024-03-31
|
Project Status |
Granted (Fiscal Year 2022)
|
Budget Amount *help |
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2023: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2022: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2021: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2020: ¥1,820,000 (Direct Cost: ¥1,400,000、Indirect Cost: ¥420,000)
|
Keywords | 顔表情および音声からの感情推定 / ヒューマンエージェントインタラクション / ヒューマンロボットインタラクション / 感性情報工学 |
Outline of Research at the Start |
本研究はユーザの嗜好をインタラクティブに学習し,インタラクションにユーザの好みを反映することが出来るエージェントの実現を目指している.エージェントはインタラクション中のユーザの音声から感情を推定し,その極性や強度から報酬を自律的に獲得し,ユーザが好むインタラクションを学習する.特に,言語情報を伴わない音響情報から感情を推定するモデルを使用し,嗜好獲得に有用な感情を調査する.また,シミュレータ上のエージェントだけでなく実機ロボットを用いて感性評価実験を通して本手法の有効性を検証する.
|
Outline of Annual Research Achievements |
本研究は音声からの感情推定を用いてユーザの嗜好を獲得し,インタラクションにユーザの好みを反映することが出来るエージェントの構築,およびエージェントに対する印象を向上させることを目的としている. 3年次の成果として特筆すべきものは感情推定・感情表現に関する技術が挙げられる.本研究課題において感情推定はユーザの嗜好学習における要素の一つであり,特に音声からの感情推定が提案システムに組み込まれている.また,ユーザが自然な感情表現であると感じるような技術開発もユーザへ出力する行動価値関数の学習,ならびに感情推定も含めた感情モデルの構築にとって重要な技術である. これまでに引き続き音声と表情から感情推定するモデルの改良に取り組んでいるが,特に感情表現に関する研究の成果が徐々に出始めている.ロボットの身体で感情を表現する研究や,文章から推定した絵文字に基づき応答表情を表出するインタラクティブエージェントに関する研究成果を発表した.また,ドメイン適応によって脳波データの個人差を吸収し,感情推定モデルの精度を向上させた研究成果も発表した. そのほか,商品配置最適化アルゴリズムが算出した最適化後の配置をより正しく評価するためのシミュレータ開発に関する研究発表を国際会議(IEA/AIE 2022)にて行った.感情モデルとは直接の関係は無いものの,本研究でも取り扱うマルチエージェントシステムおよびシミュレータ作成に関する知見の獲得に寄与した研究である.提案したシミュレータは共同研究先から提供頂いたデータから実倉庫におけるピッキングカートの動作を再現することを目的として開発を進めていた.改良の余地はあるものの,共同研究先の方々に納得して頂ける成果を出すことに成功した.
|
Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
被験者実験を伴わない感情推定モデルの構築に関する研究は進展が見られたが,COVID-19の影響もあり,当初予定していた被験者の主観評価による感性評価実験は現時点においても小規模なものにとどまっている.感情表現に関する研究や,商品配置最適化アルゴリズムのためのマルチエージェントシミュレータ開発など,成果を残した研究も見られるが,本研究課題に対する進捗状況はやや遅れていると判断した.
|
Strategy for Future Research Activity |
今後は本研究が対象としている報酬付与時の音声を用いた感情認識に取り組みたい.大規模言語モデルの発達が顕著であり,音声からの言語認識によって大規模言語モデルを利用した感情認識モデルの構築を模索中である.そのためにはデータ収集から取り組まねばならず,COVID-19の影響によって面着実験の実施は困難であるため,主観評価実験無しで収集する方法を模索中である.現在は国立情報学研究所の音声資源コンソーシアムにて公開されている「感情評定値付きオンラインゲーム音声チャットコーパス (OGVC)」の利用を考えているが,より良いコーパスの探索も続けていく. また,既に着手しているが,実機ロボットへの応用を目指したアプローチの一つとして,リアルタイムかつ直感的に実機ロボットを制御可能な技術であるAssociative Motion Generation(AMG)の改良を進める.
|
Report
(3 results)
Research Products
(176 results)