• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Development of an English conversation learning system based on spoken dialog with an agent

Research Project

Project/Area Number 24652111
Research Category

Grant-in-Aid for Challenging Exploratory Research

Allocation TypeMulti-year Fund
Research Field Foreign language education
Research InstitutionTohoku University

Principal Investigator

ITO Akinori  東北大学, 工学(系)研究科(研究院), 教授 (70232428)

Co-Investigator(Kenkyū-buntansha) HIROI Yutaka  大阪工業大学, 工学部, 准教授 (80405927)
Project Period (FY) 2012-04-01 – 2015-03-31
Project Status Completed (Fiscal Year 2014)
Budget Amount *help
¥3,250,000 (Direct Cost: ¥2,500,000、Indirect Cost: ¥750,000)
Fiscal Year 2014: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2013: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2012: ¥1,950,000 (Direct Cost: ¥1,500,000、Indirect Cost: ¥450,000)
Keywords英語学習システム / 英会話学習 / 拡張現実感 / ロボット / 人間機械間インタラクション / 外国語教育システム / 音声対話システム / 音声認識 / マルチモーダル対話 / ロボティクス / 指さし / 歩行動作
Outline of Final Research Achievements

In this project, we developed a system for training of communication skill in English for Japanese learners, in which the learner makes conversation exercises with a robot or a virtual character. First, we developed a robot that could move in a room by following a person, understand a position by recognizing the pointing gesture and made conversations with the learner in English. Then we developed a speech recognition method where the learner’s speech with grammatical mistakes can be recognized correctly. Finally, we developed a method for conversation exercise with a virtual character where the learner can acquire a proper timing for answering the interlocutor’s utterance.

Report

(4 results)
  • 2014 Annual Research Report   Final Research Report ( PDF )
  • 2013 Research-status Report
  • 2012 Research-status Report
  • Research Products

    (29 results)

All 2015 2014 2013 2012

All Journal Article (7 results) (of which Peer Reviewed: 7 results,  Acknowledgement Compliant: 2 results) Presentation (22 results) (of which Invited: 1 results)

  • [Journal Article] Controlling Switching Pause using an AR Agent for Interactive CALL System2014

    • Author(s)
      Naoto Suzuki, Takashi Nose, Yutaka Hiroi and Akinori Ito
    • Journal Title

      Proc. HCI International 2014 - Posters' Extended Abstracts, Communications in Computer and Information Science

      Volume: 435 Pages: 588-593

    • DOI

      10.1007/978-3-319-07854-0_102

    • ISBN
      9783319078533, 9783319078540
    • Related Report
      2014 Annual Research Report
    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] Teaching a Robot where Objects are: Specification of object location using human following and human orientation estimation2014

    • Author(s)
      Keisuke Sakai, Yutaka Hiroi, and Akinori Ito
    • Journal Title

      Proc. of 14th International Symposium on Robotics and Applications

      Volume: 1 Pages: 1-6

    • DOI

      10.1109/wac.2014.6936012

    • Related Report
      2014 Annual Research Report
    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] 拡張現実感を用いたロボットデザインの評価2013

    • Author(s)
      廣井富,伊藤彰則
    • Journal Title

      日本バーチャルリアリティ学会論文誌

      Volume: 18 Pages: 161-170

    • NAID

      110009624274

    • Related Report
      2013 Research-status Report
    • Peer Reviewed
  • [Journal Article] ASAHI: OK for Failure -A Robot for Supporting Daily Life, Equipped with a Robot Avatar-2013

    • Author(s)
      Yutaka Hiroi and Akinori Ito
    • Journal Title

      Proc. of 8th ACM/IEEE International Conference on Human-Robot Interaction

      Volume: vol. 1 Pages: 141-142

    • Related Report
      2012 Research-status Report
    • Peer Reviewed
  • [Journal Article] A Mobile Robot System With Semi-Autonomous Navigation Using Simple And Robust Person Following Behavior2012

    • Author(s)
      Yutaka Hiroi, Shohei Matsunaka and Akinori Ito
    • Journal Title

      Journal of Man, Machine and Technology

      Volume: vol.1 Pages: 44-62

    • Related Report
      2012 Research-status Report
    • Peer Reviewed
  • [Journal Article] Effect of Robot Height on Comfortableness of Spoken Dialog2012

    • Author(s)
      Y. Hiroi, T. Nakayama, H. Kuroda, S. Miyake and A. Ito
    • Journal Title

      Proc. 5th International Conference on Human System Interaction

      Volume: vol. 1 Pages: 29-34

    • Related Report
      2012 Research-status Report
    • Peer Reviewed
  • [Journal Article] Recognition of Utterances with Grammatical Mistakes based on Optimization of Language Model towards Interactive CALL Systems2012

    • Author(s)
      Takuya Anzai and Akinori Ito
    • Journal Title

      Proc. APSIPA ASC

      Volume: vol. 1 Pages: 1-4

    • Related Report
      2012 Research-status Report
    • Peer Reviewed
  • [Presentation] 英会話学習システムの複数回使用時における学習者の交替潜時の変化に関する検討2015

    • Author(s)
      鈴木 直人,廣井 富,藤原 祐磨,千葉 祐弥,能勢 隆,伊藤 彰則
    • Organizer
      日本音響学会2015年春季研究発表会
    • Place of Presentation
      中央大学後楽園キャンパス(東京都文京区)
    • Year and Date
      2015-03-16 – 2015-03-18
    • Related Report
      2014 Annual Research Report
  • [Presentation] 英会話学習システムにおける応答タイミング練習方法の有効性の検証2015

    • Author(s)
      鈴木直人,廣井富,藤原祐磨,千葉祐弥,能勢隆,伊藤彰則
    • Organizer
      第105回SLP研究会
    • Place of Presentation
      合歓の郷ホテル&リゾート(三重県志摩市)
    • Year and Date
      2015-02-27 – 2015-02-28
    • Related Report
      2014 Annual Research Report
  • [Presentation] LRFによる人追従を考慮した障害物回避手法の提案2014

    • Author(s)
      坂井奎亮, 廣井富, 伊藤彰則
    • Organizer
      第32回日本ロボット学会
    • Place of Presentation
      九州産業大学(福岡県福岡市)
    • Year and Date
      2014-09-04 – 2014-09-06
    • Related Report
      2014 Annual Research Report
  • [Presentation] 英会話学習システムにおけるCGキャラクタの効果と学習者の発話タイミング制御のための付加表現に関する検討2014

    • Author(s)
      鈴木 直人,廣井 富,藤原 祐磨,千葉 祐弥,能勢 隆,伊藤 彰則
    • Organizer
      日本音響学会秋期研究発表会
    • Place of Presentation
      北海学園大学(北海道札幌市)
    • Year and Date
      2014-09-03 – 2014-09-05
    • Related Report
      2014 Annual Research Report
  • [Presentation] 日常生活支援移動ロボットASAHI2013の開発2014

    • Author(s)
      廣井富, 坂井奎亮, 二上啓大, 藤原祐磨, 伊藤彰則
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Place of Presentation
      富山国際会議場(富山県富山市)
    • Year and Date
      2014-05-25 – 2014-05-29
    • Related Report
      2014 Annual Research Report
  • [Presentation] 手すり上を移動するコミュニケーションロボットの開発―伸びる手を用いた道案内の提案―2014

    • Author(s)
      藤原祐磨, 廣井富, 川崎成人, 黒田尚孝, 鈴木直人, 伊藤彰則
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Place of Presentation
      富山国際会議場(富山県富山市)
    • Year and Date
      2014-05-25 – 2014-05-29
    • Related Report
      2014 Annual Research Report
  • [Presentation] 指差しと音声対話併用による床面上の物体回収手法の提案2014

    • Author(s)
      二上啓大, 廣井富, 黒田尚孝, 鈴木直人, 伊藤彰則
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Place of Presentation
      富山国際会議場(富山県富山市)
    • Year and Date
      2014-05-25 – 2014-05-29
    • Related Report
      2014 Annual Research Report
  • [Presentation] LRFを用いた人追従時の移動軌跡の記録と軌道追従に関する基礎的検討2014

    • Author(s)
      坂井 奎亮, 廣井富, 伊藤彰則
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Place of Presentation
      富山国際会議場(富山県富山市)
    • Year and Date
      2014-05-25 – 2014-05-29
    • Related Report
      2014 Annual Research Report
  • [Presentation] AR キャラクタとの英会話練習時における交代潜時のタイムプレッシャーによる制御2014

    • Author(s)
      鈴木 直人
    • Organizer
      日本音響学会
    • Place of Presentation
      東京
    • Related Report
      2013 Research-status Report
  • [Presentation] ARキャラクタを用いた音声対話による英会話学習システムの検討 : タイムプレッシャー導入の効果2013

    • Author(s)
      鈴木 直人
    • Organizer
      日本バーチャルリアリティ学会
    • Place of Presentation
      大阪
    • Related Report
      2013 Research-status Report
  • [Presentation] ARキャラクタとの英会話練習時における交替潜時のタイムプレッシャーによる制御2013

    • Author(s)
      鈴木 直人
    • Organizer
      情報処理学会音声言語情報処理研究会
    • Place of Presentation
      東京
    • Related Report
      2013 Research-status Report
  • [Presentation] 手すりを移動するコミュニケーションロボット―道案内方法の比較―2013

    • Author(s)
      廣井富
    • Organizer
      日本ロボット学会
    • Place of Presentation
      東京
    • Related Report
      2013 Research-status Report
  • [Presentation] LRFを用いた人追従における見失い時の再検出手法の提案2013

    • Author(s)
      稲岡雅人, 廣井富
    • Organizer
      日本機械学会関西学生会学生員卒業研究発表講演会
    • Place of Presentation
      大阪工業大学
    • Related Report
      2012 Research-status Report
  • [Presentation] ロボットアバタと日常生活支援ロボット2012

    • Author(s)
      廣井富
    • Organizer
      テレイグジスタンス研究会
    • Place of Presentation
      慶應義塾大学日吉キャンパス
    • Related Report
      2012 Research-status Report
    • Invited
  • [Presentation] ロボットアバタを用いた指さし行為の移動ロボットへの実装2012

    • Author(s)
      黒田尚孝, 廣井富, 三宅真司, 伊藤彰則
    • Organizer
      第30回日本ロボット学会学術講演会
    • Place of Presentation
      札幌コンベンションセンター
    • Related Report
      2012 Research-status Report
  • [Presentation] 手すりを移動するコミュニケーションロボット―全体コンセプト―2012

    • Author(s)
      廣井富, 内田裕二, 西村駿宏. 中山貴之, 黒田尚孝, 三宅真司, 戸塚典子, 伊藤 彰則
    • Organizer
      ヒューマンインタフェースシンポジウム
    • Place of Presentation
      九州大学大橋キャンパス
    • Related Report
      2012 Research-status Report
  • [Presentation] ロボットアバタを用いた指差し行為の実現 ―ロボットアバタへの実装―2012

    • Author(s)
      黒田尚孝, 廣井富, 三宅真司, 伊藤彰則
    • Organizer
      第14回日本感性工学会大会
    • Place of Presentation
      東京電機大学千住キャンパス
    • Related Report
      2012 Research-status Report
  • [Presentation] ロボットの動作によって人間の発話開始時間を制御できるか?2012

    • Author(s)
      中山貴之, 廣井富, 黒田尚孝, 三宅真司, 伊藤彰則
    • Organizer
      情報処理学会音声言語情報処理研究会
    • Place of Presentation
      天童温泉
    • Related Report
      2012 Research-status Report
  • [Presentation] 質問応答データベースを用いた聞き返し発話の検出に関する検討2012

    • Author(s)
      三宅真司, 廣井富, 伊藤彰則
    • Organizer
      情報処理学会音声言語情報処理研究会
    • Place of Presentation
      天童温泉
    • Related Report
      2012 Research-status Report
  • [Presentation] 日常生活支援移動ロボットASAHIの開発-全体構想とハードウェア構成-2012

    • Author(s)
      廣井富, 黒田尚孝, 内藤圭祐, 髙田晶太, 松井一馬, 井上駿, 林和孝, 中山貴之, 松中翔平, 伊藤彰則
    • Organizer
      ロボティクス・メカトロニクス講演会 2012
    • Place of Presentation
      アクトシティ浜松
    • Related Report
      2012 Research-status Report
  • [Presentation] ロボットアバタを用いた指差し行為の実現-基本コンセプトと予備実験-2012

    • Author(s)
      黒田尚孝, 廣井富, 松井一馬, 三宅真司, 伊藤彰則
    • Organizer
      ロボティクス・メカトロニクス講演会 2012
    • Place of Presentation
      アクトシティ浜松
    • Related Report
      2012 Research-status Report
  • [Presentation] 一つのLRF を用いた人追跡に関する一考察2012

    • Author(s)
      松中翔平, 廣井富, 内藤圭祐, 井上駿, 伊藤彰則
    • Organizer
      ロボティクス・メカトロニクス講演会 2012
    • Place of Presentation
      アクトシティ浜松
    • Related Report
      2012 Research-status Report

URL: 

Published: 2013-05-31   Modified: 2019-07-29  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi