2016 Fiscal Year Research-status Report
Involvement-in-conversation-game型CALLの研究
| Project/Area Number |
15K02738
|
|---|
| Research Institution | Doshisha University |
|---|
Principal Investigator |
山本 誠一 同志社大学, 理工学部, 教授 (20374100)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
馬田 一郎 国立研究開発法人情報通信研究機構, ユニバーサルコミュニケーション研究所多感覚・評価研究室, 研究員 (40374110) [Withdrawn]
|
|---|
| Project Period (FY) |
2015-04-01 – 2020-03-31
|
| Keywords | CALL / 音声認識 / 第二言語 |
|---|
| Outline of Annual Research Achievements |
本研究では、複数人の会話で言語運用能力の低い参加者は言語運用能力の高い参加者の表現を借用する傾向があるというInteractive alignment現象を利用することにより、複数人での会話に学習者の参加を促して第二言語学習を促進するシステムであるJoinig-in typeの音声対話型CALLシステムの実現方法を目的としている。
本年度は、昨年度に続いて教師役のロボットと学習者より第二言語会話能力が高いという設定の生徒役ロボットの２台の人型ロボット間の会話シナリオを設定し、その会話の一部の質問を学習者にも行う実験環境を開発し、被験者の発話データの収集・分析を行った。特に、Interactive alignment現象の生起確率を検証するために、質問に対し人型ロボットが先に応答を行う実験群と学習者が先に応答を行う統制群とを設け、更に構文構造の類似する表現を何度か繰り返すことによる、implicitな表現学習の効果を中心に分析を進めた。この結果、部分文での表現の類似度を示すBLEU(bilingual evaluation understudy)での指標で、実験群では指標の大幅な向上が見られ、implicit learningによる学習効果が確認された。
以上のデータ分析に基づき、本研究対象のCALLシステムにより収集された音声データの分析結果を、テキスト・音声コーパスに関する国際学会Oriental COCOSDAで発表した。更に、CALLシステム開発に必要となる要素技術に関する研究結果等をInterspeech等の学会での発表、電子情報通信学会の論文誌への掲載などの成果が得られた。
現在、このJoining-in typeのCALLシステムで収集された発話結果をまとめ、テキスト・音声コーパスに関する論文誌であるLREVに投稿準備を進めている。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
第１段階での主要項目は複数人での会話分析であり、１６０セットの会話データの収集を目標としている。現在までに、第二言語での会話を自由会話、課題会話各々について20セット（計40セット）を収集し、更に、人型ロボットとの会話データを120セット収集した。
このデータの分析により、人型ロボットとの会話においては、2台の人型ロボット間の会話シナリオの設計が学習者の発話の予測性能に大きな影響を与えることが判明したので、より効果的に会話が継続できるための会話シナリオの見直しと再設計を進めた。
|
| Strategy for Future Research Activity |
新たな会話シナリオに基づき会話データの収集を進めると共に、そのデータに基づく言語モデル開発を進める。また、視線データの分析結果に基づく発話の予測性能向上について検討を進める。
|
| Causes of Carryover |
人型ロボットとの会話においては、2台の人型ロボット間の会話シナリオの設計が学習者の発話の予測性能に大きな影響を与えることが分析により判明した。このため、発話シナリオの見直しと再設計を進めた。この再設計を進めるために、いくつかのケースについて予備実験を進めたため、当初予定した大規模な会話データ収集計画に遅延が生じ、そのデータ収集のための被験者への謝礼の支払い額が減少した。
|
| Expenditure Plan for Carryover Budget |
シナリオの再設計により提案手法の効果が明らかとなっため、新たなシナリオで会話データの大規模収集を進めるために募集する被験者の謝礼の支払いとして使用する計画である。
|
