• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Practical application and validation of a computerized automatic scoring Japanese speaking test

Research Project

Project/Area Number 26244026
Research Category

Grant-in-Aid for Scientific Research (A)

Allocation TypeSingle-year Grants
Section一般
Research Field Japanese language education
Research InstitutionUniversity of Tsukuba

Principal Investigator

IMAI Shingo  筑波大学, 人文社会系, 教授 (50346582)

Co-Investigator(Kenkyū-buntansha) 西村 竜一  和歌山大学, システム工学部, 助教 (00379611)
山田 武志  筑波大学, システム情報系, 准教授 (20312829)
赤木 彌生  山口大学, 大学教育機構留学生センター, 准教授 (30346580)
中園 博美  島根大学, 外国語教育センター, 准教授 (40314611)
伊東 祐郎  東京外国語大学, 大学院国際日本語研究院, 教授 (50242227)
菊地 賢一  東邦大学, 理学部, 教授 (50270426)
中村 洋一  清泉女学院短期大学, 国際コミュニケーション科, 教授 (70326809)
本田 明子  立命館アジア太平洋大学, 言語教育センター, 准教授 (80331130)
篠崎 隆宏  東京工業大学, 大学院総合理工学研究科, 准教授 (80447903)
家根橋 伸子  東亜大学, 人間科学部, 教授 (80609652)
Research Collaborator ISHIZUKA Kenkichi  
Project Period (FY) 2014-04-01 – 2017-03-31
Project Status Completed (Fiscal Year 2016)
Budget Amount *help
¥37,700,000 (Direct Cost: ¥29,000,000、Indirect Cost: ¥8,700,000)
Fiscal Year 2016: ¥10,920,000 (Direct Cost: ¥8,400,000、Indirect Cost: ¥2,520,000)
Fiscal Year 2015: ¥12,480,000 (Direct Cost: ¥9,600,000、Indirect Cost: ¥2,880,000)
Fiscal Year 2014: ¥14,300,000 (Direct Cost: ¥11,000,000、Indirect Cost: ¥3,300,000)
Keywordsスピーキングテスト / CAT / 日本語能力 / 自動採点 / 適応型テスト / 日本語 / スピーキング / 項目応答理論 / 音声認識 / 日本語教育 / 教育工学 / 項目反応理論 / 日本語テスト / コンピュータテスト
Outline of Final Research Achievements

We developed a testing system called SJ-CAT (Speaking Japanese Computerized Adaptive Test), which is accessible on the Internet. The test automatically measures the speaking ability of non-native speakers of Japanese language. SJ-CAT consists of four types of questions, i.e., reading a sentence, reading a correct sentence from three choices, making a sentence, and expressing one's opinion. The system evaluates one's speaking ability based on acoustic feature value (e.g. prosodic patterns, acoustic likelihood, and several kind of speaking rates) and keywords. Scores are calculated by means of a polytomous Item Response Model. Comparison between SJ-CAT and another speaking test, which is evaluated by trained human raters, showed high correlation, which indicates the practicality of SJ-CAT.

Report

(4 results)
  • 2016 Annual Research Report   Final Research Report ( PDF )
  • 2015 Annual Research Report
  • 2014 Annual Research Report
  • Research Products

    (38 results)

All 2017 2016 2015 2014 Other

All Journal Article (8 results) (of which Open Access: 2 results,  Acknowledgement Compliant: 2 results,  Peer Reviewed: 1 results) Presentation (27 results) (of which Int'l Joint Research: 3 results,  Invited: 13 results) Book (2 results) Remarks (1 results)

  • [Journal Article] Chapter 3: Future of Language Assessment, 3.2.5 Item Writing and Task Design2016

    • Author(s)
      中村洋一
    • Journal Title

      日本言語学会誌

      Volume: 20周年特別号 Pages: 69-72

    • Related Report
      2016 Annual Research Report
    • Open Access
  • [Journal Article] コンピュータ適応型テスティング〔実践編〕2016

    • Author(s)
      今井新悟
    • Journal Title

      日本言語テスト学会誌

      Volume: 19 Pages: 186-190

    • Related Report
      2016 Annual Research Report
    • Open Access
  • [Journal Article] 日本語スピーキングテストSJ-CATにおける低スコア解答発話の検出の検討2015

    • Author(s)
      小野友暉・山田武志・今井新悟・牧野昭二
    • Journal Title

      日本音響学会2015年秋季研究発表会講演論文集

      Volume: 1-Q-46 Pages: 329-332

    • Related Report
      2015 Annual Research Report
    • Acknowledgement Compliant
  • [Journal Article] 21st Century Skills と MRM2015

    • Author(s)
      中村洋一
    • Journal Title

      公益財団法人日本英語検定協会 2014年度 英語教育研究センター 委託研究「ICT等を活用した評価についての調査・研究報告書」

      Volume: なし Pages: 19-30

    • Related Report
      2014 Annual Research Report
  • [Journal Article] Mixture Rasch Model (MRM) の考察と展望: 21st Century Skills とMRM2015

    • Author(s)
      中村洋一
    • Journal Title

      公益財団法人日本英語検定協会 2014年度 英語教育研究センター 委託研究「ICT等を活用した評価についての調査・研究報告書」

      Volume: なし Pages: 54-58

    • Related Report
      2014 Annual Research Report
  • [Journal Article] アダプティブ・テストによる日本語評価システム2015

    • Author(s)
      赤木彌生
    • Journal Title

      2015年大葉大学日語教学国際学術研討会 第7回日語的研究・教学・応用大会発表集

      Volume: なし Pages: 126-133

    • Related Report
      2014 Annual Research Report
  • [Journal Article] Automatic scoring method for open answer task in the SJ-CAT speaking test considering utterance difficulty level2014

    • Author(s)
      Hao Lu, Takeshi Yamada, Shingo Imai, Takahiro Shinozaki, Ryuichi Nisimura, Kenkichi Ishizuka, Shoji Makino, Nobuhiko Kitawaki
    • Journal Title

      Proc. Asia-Pacific Signal and Information Processing Association (APSIPA) Annual Summit and Conference (ASC) 2014

      Volume: WA1-1-3 Pages: 1-5

    • Related Report
      2014 Annual Research Report
    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] ことばの能力を測るということ2014

    • Author(s)
      伊東祐郎
    • Journal Title

      日本語学

      Volume: 33-12 Pages: 6-15

    • Related Report
      2014 Annual Research Report
  • [Presentation] 半教師ありDNN学習を用いた日本語スピーキングテスト音声の認識2017

    • Author(s)
      加藤 拓,篠崎 隆宏
    • Organizer
      日本音響学会 2017年 春季研究発表会
    • Place of Presentation
      明治大学生田キャンパス(神奈川県川崎市)
    • Year and Date
      2017-03-15
    • Related Report
      2016 Annual Research Report
  • [Presentation] SJ-CATにおける項目応答理論に基づく能力値推定の精度改善2017

    • Author(s)
      小野友暉, 山田武志, 菊地賢一, 今井新悟, 牧野昭二
    • Organizer
      日本音響学会2017年春季研究発表会
    • Place of Presentation
      明治大学(神奈川県川崎市)
    • Year and Date
      2017-03-15
    • Related Report
      2016 Annual Research Report
  • [Presentation] ChimeChallengeタスクにおけるNMFによる雑音除去の検討2017

    • Author(s)
      小澤 奈摘,田中 智大,篠崎 隆宏
    • Organizer
      情報処理学会 第115回音声言語処理研究会
    • Place of Presentation
      琴平グランドホテル(香川県琴平町)
    • Year and Date
      2017-02-17
    • Related Report
      2016 Annual Research Report
  • [Presentation] 日本語スピーキングテストSJ-CATにおける項目応答理論に基づく能力値推定の検証2016

    • Author(s)
      小野友暉, 山田武志, 菊地賢一, 今井新悟, 牧野昭二
    • Organizer
      日本音響学会2016年秋季研究発表会
    • Place of Presentation
      富山大学(富山県富山市)
    • Year and Date
      2016-09-14
    • Related Report
      2016 Annual Research Report
  • [Presentation] ワークショップ:テスト作成・評価法2016

    • Author(s)
      今井新悟
    • Organizer
      ウズベキスタン日本語教師会 日本語教育セミナー(招待講演)
    • Place of Presentation
      タシケント(ウズベキスタン)
    • Year and Date
      2016-08-13
    • Related Report
      2016 Annual Research Report
  • [Presentation] これからの日本語教育と日本語力評価2016

    • Author(s)
      伊東祐郎
    • Organizer
      ベオグラード大学日本語教育40周年記念プログラム
    • Place of Presentation
      ベオグラード大学 (ベオグラード:セルビア)
    • Year and Date
      2016-03-15
    • Related Report
      2015 Annual Research Report
    • Invited
  • [Presentation] SJ-CAT (Speaking Japanese Computerized Test)の紹介/NLT (Ninjal-Lwp for Tsukuba Web Corpus)の使い方2016

    • Author(s)
      今井新悟
    • Organizer
      アイルランド日本語教師会セミナー(招待講演)
    • Place of Presentation
      ダブリン(アイルランド)
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] 日本語教師はもういらない?-教育環境の変化と求められる教師像-2016

    • Author(s)
      今井新悟
    • Organizer
      平成28年度日本語学校教育研究大会(招待講演)
    • Place of Presentation
      国立オリンピック記念青少年総合センター(東京都渋谷区)
    • Related Report
      2016 Annual Research Report
    • Invited
  • [Presentation] 日本語スピーキングテストSJ-CATにおける低スコア解答発話の検出の検討2015

    • Author(s)
      小野友暉・山田武志・今井新悟・牧野昭二
    • Organizer
      日本音響学会秋季研究発表会
    • Place of Presentation
      会津大学(福島県会津若松市)
    • Year and Date
      2015-09-16
    • Related Report
      2015 Annual Research Report
  • [Presentation] 日本語教育における評価2015

    • Author(s)
      伊東祐郎
    • Organizer
      インドネシア日本語教育学会主催国際セミナー
    • Place of Presentation
      ウダヤナ大学 (デンパサール:インドネシア)
    • Year and Date
      2015-08-21
    • Related Report
      2015 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] 自動採点スピーキングテスト:SJ-CAT2015

    • Author(s)
      今井新悟
    • Organizer
      The 6th International Conference on Computer Assisted Systems for Teaching & Learning Japanese (CASTEL/J)
    • Place of Presentation
      University of Hawai’i Kapiolani Community College (ホノルル:米国)
    • Year and Date
      2015-08-08
    • Related Report
      2015 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Online Teaching & Testing for Japanese Language Learners.2015

    • Author(s)
      今井新悟・酒井たか子・加納千恵子・小林典子
    • Organizer
      Workshop: University of Hawai‘i at Manoa
    • Place of Presentation
      University of Hawai‘i at Manoa (ホノルル:米国)
    • Year and Date
      2015-08-06
    • Related Report
      2015 Annual Research Report
    • Invited
  • [Presentation] アダプティブ・テストによる日本語評価システム2015

    • Author(s)
      赤木彌生
    • Organizer
      2015年大葉大学日語教学国際学術研討会
    • Place of Presentation
      大葉大学(中華民国・彰化県)
    • Year and Date
      2015-03-28
    • Related Report
      2014 Annual Research Report
    • Invited
  • [Presentation] ウェブアプリケーションにおける音声入力UIの設計と評価について2015

    • Author(s)
      田藤千弘、西村竜一、入野俊夫、河原英紀
    • Organizer
      日本音響学会2015年春季研究発表会
    • Place of Presentation
      中央大学後楽園キャンパス(東京都文京区)
    • Year and Date
      2015-03-16
    • Related Report
      2014 Annual Research Report
  • [Presentation] スピーキングテストシステムにおける発話内容を考慮した自動採点2015

    • Author(s)
      小野豊、篠崎隆宏、堀内靖雄、黒岩眞吾
    • Organizer
      電子情報通信学会
    • Place of Presentation
      立命館大学 びわこ・くさつキャンパス(滋賀県草津市)
    • Year and Date
      2015-03-11
    • Related Report
      2014 Annual Research Report
  • [Presentation] The Use of Technology in Japanese Language Education2015

    • Author(s)
      赤木彌生
    • Organizer
      女性言語教育学会 (Women Educators and Language Learners)
    • Place of Presentation
      国立女性教育会館(埼玉県嵐山町)
    • Year and Date
      2015-02-07
    • Related Report
      2014 Annual Research Report
    • Invited
  • [Presentation] Automatic Scoring Method for Open Answer Task in the SJ-CAT Speaking Test Considering Utterance Difficulty Level.2014

    • Author(s)
      Lu, Hao, Takeshi Yamada, Shingo Imai, Takahiro Shinozakiy, Ryuichi Nisimuraz, Kenkichi Ishizuka, Shoji Makino, and Nobuhiko Kitawaki
    • Organizer
      Asia-Pacific Signal and Information Processing Association (APSIPA) Annual Summit and Conference (ASC) 2014
    • Place of Presentation
      Sokha Angkor Resort Hotel, the city of Angkor Wat, Cambodia
    • Year and Date
      2014-12-10
    • Related Report
      2014 Annual Research Report
  • [Presentation] 言語教育におけるICTテクノロジーの進展と教師の将来2014

    • Author(s)
      今井新悟
    • Organizer
      NINJALコロキウム
    • Place of Presentation
      国立国語研究所(東京都立川市)
    • Year and Date
      2014-10-28
    • Related Report
      2014 Annual Research Report
    • Invited
  • [Presentation] コンピュータアダプティブテストの理論と実際:J-CAT (Japanese Computerized Adaptive Test)を例に2014

    • Author(s)
      今井新悟・中村洋一
    • Organizer
      日本言語テスト学会第18回全国研究大会ワークショップ
    • Place of Presentation
      立命館大学 びわこ・くさつキャンパス(滋賀県草津市)
    • Year and Date
      2014-09-20
    • Related Report
      2014 Annual Research Report
    • Invited
  • [Presentation] 音声認識を用いた日本語スピーキングテストとそのユーザインタフェースデザインの検討2014

    • Author(s)
      田藤千弘・西村竜一・河原英紀・入野俊夫・今井新悟
    • Organizer
      教育システム情報学会第39回全国大会
    • Place of Presentation
      和歌山大学(和歌山県和歌山市)
    • Year and Date
      2014-09-10
    • Related Report
      2014 Annual Research Report
  • [Presentation] HTML5による音声入力ウェブアプリケーションの開発キット2014

    • Author(s)
      田藤千弘、西村竜一
    • Organizer
      日本音響学会2014年秋季研究発表会
    • Place of Presentation
      北海学園大学(北海道札幌市)
    • Year and Date
      2014-09-04
    • Related Report
      2014 Annual Research Report
  • [Presentation] 授業計画と学習評価2014

    • Author(s)
      伊東祐郎
    • Organizer
      第9回全国大学日本語教師研修会
    • Place of Presentation
      国航大厦ホテル(中国・大連)
    • Year and Date
      2014-07-19
    • Related Report
      2014 Annual Research Report
    • Invited
  • [Presentation] 外国人児童生徒のためのDLA-JSL評価参照枠の課題と展望-対話型アプローチの利点と年齢ブロック別対応の必要性に焦点を当てて-2014

    • Author(s)
      伊東祐郎
    • Organizer
      ICJLEシドニー
    • Place of Presentation
      シドニー工科大学(オーストラリア・シドニー)
    • Year and Date
      2014-07-11
    • Related Report
      2014 Annual Research Report
  • [Presentation] 評価とコースデザイン2014

    • Author(s)
      伊東祐郎
    • Organizer
      トルコ日本語教師会
    • Place of Presentation
      ボアジチ大学(トルコ・イスタンブール)
    • Year and Date
      2014-06-22
    • Related Report
      2014 Annual Research Report
    • Invited
  • [Presentation] 受験者を焦らせない音声入力ウェブ試験システムを目指したデザインの検討2014

    • Author(s)
      田藤千弘、西村竜一、河原英紀、入野俊夫
    • Organizer
      情報処理学会/電子情報通信学会, 音学シンポジウム2014
    • Place of Presentation
      日本大学文理学部(東京都世田谷区)
    • Year and Date
      2014-05-25
    • Related Report
      2014 Annual Research Report
  • [Presentation] グローバル化時代の日本語教師2014

    • Author(s)
      伊東祐郎
    • Organizer
      韓国日語教育学会第25回国際学術大会
    • Place of Presentation
      建国大学校(韓国・ソウル)
    • Year and Date
      2014-04-26
    • Related Report
      2014 Annual Research Report
    • Invited
  • [Presentation] Sustainability Of The Computerized Adaptive Test for Japanese Language Proficiency Tests2014

    • Author(s)
      赤木彌生
    • Organizer
      International Conference on Human Sustainability, Universiti Tun Onn Malaysia(UTHM) (INSAN2014)
    • Place of Presentation
      Universiti Tun Onn Malaysia (マレーシア・ジョホール)
    • Year and Date
      2014-04-09
    • Related Report
      2014 Annual Research Report
    • Invited
  • [Book] 日語教学研究2016

    • Author(s)
      徐敏民、近藤安月子、修剛、張威、曹大峰、石田敏子、小林ミナ、今井新悟他
    • Total Pages
      620
    • Publisher
      外語教学与研究出版社
    • Related Report
      2016 Annual Research Report
  • [Book] 日本語教育実践2014

    • Author(s)
      阿部祐子、伊東祐郎、左治木敦子、佐野ひろみ、嶋津拓、杉山朗子、陳風、當眞正裕、長谷川恒雄、橋本洋輔、 邊姫京、堀内仁、渡邊靖史、鮎澤孝子(編集)
    • Total Pages
      349
    • Publisher
      凡人社
    • Related Report
      2014 Annual Research Report
  • [Remarks] SJ-CAT

    • URL

      https://www.sj-cat.org/

    • Related Report
      2016 Annual Research Report

URL: 

Published: 2014-04-04   Modified: 2018-03-22  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi