Intelligent Conversational System for Dialogue Engagement and Rapport with Humans
| Project Area | Studies on intelligent systems for dialogue toward the human-machine symbiotic society |
|---|
| Project/Area Number |
19H05691
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area)
|
| Allocation Type | Single-year Grants |
|---|
| Review Section |
Complex systems
|
|---|
| Research Institution | Kyoto University |
|---|
Principal Investigator |
河原 達也 京都大学, 情報学研究科, 教授 (00234104)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
井上 昂治 京都大学, 情報学研究科, 助教 (10838684)
吉川 雄一郎 大阪大学, 基礎工学研究科, 准教授 (60418530)
飯尾 尊優 同志社大学, 文化情報学部, 准教授 (70642958)
|
|---|
| Project Period (FY) |
2019-06-28 – 2024-03-31
|
| Project Status |
Granted (Fiscal Year 2022)
|
| Budget Amount *help |
¥162,760,000 (Direct Cost: ¥125,200,000、Indirect Cost: ¥37,560,000)
Fiscal Year 2022: ¥28,080,000 (Direct Cost: ¥21,600,000、Indirect Cost: ¥6,480,000)
Fiscal Year 2021: ¥37,440,000 (Direct Cost: ¥28,800,000、Indirect Cost: ¥8,640,000)
Fiscal Year 2020: ¥28,080,000 (Direct Cost: ¥21,600,000、Indirect Cost: ¥6,480,000)
Fiscal Year 2019: ¥41,080,000 (Direct Cost: ¥31,600,000、Indirect Cost: ¥9,480,000)
|
|---|
| Keywords | 対話知能 / 音声対話 / ロボット / マルチモーダル / 知能情報学 |
|---|
| Outline of Research at the Start |
スマートフォンアシスタントやスマートスピーカによる音声対話システムの実用化が進んでいるが，ほとんどが一問一答にとどまっており，ユーザの意図に沿った対話を長く継続することは容易でない．本研究では，複数モダリティによる傾聴と複数ロボットによる対話のアプローチを組み合わせて，高度な対話感を実現し，対話継続と人間関係構築支援を可能にする知能対話システムの研究開発に取り組む．特に高齢者とのコミュニケーションを想定して，対話を継続させるためのメカニズムの解明と実現を目指す．また従来，対話相手は通常一人に限定されていたが，本研究では複数人も想定した対話モデル・システムの実現を目指す．
|
| Outline of Annual Research Achievements |
本研究では、特に高齢者とのコミュニケーションを想定して、対話を継続するためのメカニズムの解明と実現を目指している。相槌・頷き・表情などのモダリティを活用したり、複数の人間・ロボットで会話の場を形成することで、対話を維持することを考える。
京都大学の河原と井上は、これまで研究開発してきた傾聴対話システムを多人数に展開した。これは、共想法のように、多人数で順番に話をするのを傾聴する場を想定するものであるが、他の人間の聞き手に参与を促進する発話の生成を検討した。具体的には、感情分析の極性値に応じて、評価応答を生成する際に、別の聞き手の方に向けて、「いいですよね。」といった同意を求める。その聞き手が同様の反応を示すことで、会話の場として共感が醸成されることが期待される。また、話し手が話すことがなくなり沈黙した場合に、「さきほど、＊＊の話題がありましたが、何か質問はありますか」といった問いかけを別の聞き手にすることで、会話が継続することが期待される。このような多人数傾聴を行うシステムを実装し、動作確認と予備的評価を行った。
大阪大学の吉川と筑波大学の飯尾は、複数のロボットによる対話において、質問事項を構造化した上で、各ロボットに分担させて質問を伴う話者交代をさせることによって、被傾聴感が高まる複数ロボット連携対話に取り組んだ。具体的には、話題毎にいくつかの質問を行いながら、別のロボットにより話題の切り替えを行うものである。このシステムにおいて、河原と井上らによって開発された傾聴機構も統合した。
2021年1月に、ららぽーとEXPOCITY内で実証実験を実施した。その結果、３体のロボットによるシステムの方が、１体および２体のシステムに比べて、対話継続時間が長い傾向となることを確認した。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
研究自体やシステムの開発は順調に進んでいるが、コロナ禍において、被験者実験や対話実験があまりできなかった。
|
| Strategy for Future Research Activity |
傾聴・質問対話の高度化を進めるとともに、実証実験も実施する。
|
Report
(2 results)
Research Products
(24 results)
