• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

項目反応理論に基づくパフォーマンス評価フレームワークの開発と実証実験

研究課題

研究課題/領域番号 23K20727
補助金の研究課題番号 21H00898 (2021-2023)
研究種目

基盤研究(B)

配分区分基金 (2024)
補助金 (2021-2023)
応募区分一般
審査区分 小区分09070:教育工学関連
研究機関電気通信大学

研究代表者

宇都 雅輝  電気通信大学, 大学院情報理工学研究科, 准教授 (10732571)

研究期間 (年度) 2021-04-01 – 2025-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
15,730千円 (直接経費: 12,100千円、間接経費: 3,630千円)
2024年度: 3,120千円 (直接経費: 2,400千円、間接経費: 720千円)
2023年度: 4,940千円 (直接経費: 3,800千円、間接経費: 1,140千円)
2022年度: 4,550千円 (直接経費: 3,500千円、間接経費: 1,050千円)
2021年度: 3,120千円 (直接経費: 2,400千円、間接経費: 720千円)
キーワードパフォーマンス評価 / ベイズ統計 / テスト理論 / 人工知能 / 自然言語処理
研究開始時の研究の概要

近年,パフォーマンス評価の信頼性を改善する手法の一つとして,評価者のバイアスを取り除いて受検者の能力を推定できる項目反応理論の実用化が期待されている.しかし,このような項目反応理論を現実の試験で継続的・効果的に運用するためにはいくつかの問題が残る.そこで本研究ではパフォーマンス評価のための項目反応理論を継続的・効果的に運用するための手法群の開発,およびそれらを統合したパフォーマンス評価フレームワークの実証実験を行う.

研究実績の概要

パフォーマンス評価の信頼性を改善する手法の一つとして,評価者のバイアスを取り除いて受検者の能力を推定できる項目反応モデルが知られている.しかし,このような項目反応モデルを現実の試験で継続的・効果的に運用するためにはいくつかの問題が残る.本研究では,このような項目反応モデルを継続的・効果的に運用するための手法群として,1)適切な評価デザインの設計手法,2)自然言語処理技術を活用してモデルの解釈性を高める手法,3)補助情報を活用したモデル・パラメータ推定精度改善手法,を開発する.
この目標に対し,令和5年度には,令和4年度までに開発した各要素技術の発展や実運用を行なった.1)については,医療系大学間共用試験OSCEにおいて適切な評価者割当デザインに沿ったデータを収集し,そのデータに対して項目反応モデルを適用する実践を行った.分析結果は,医療系大学間共用試験の試験信頼性妥当性検討委員会や全国説明会で報告した.さらに,東京医科歯科大学のOSCEでも同様に適切なデザインでの実践を行い,そのデータを用いた分析・評価を行なった.この成果は現在医学系論文誌に投稿中である.2)に関連する研究としては,項目反応理論を用いて複数の自動採点モデルをアンサンブルする手法や,文章の論理構造を解析する論述構造解析技術を自動採点モデルに組み込んで解釈性を高めた手法などを開発した.研究成果は,分野のトップジャーナルであるIEEE TLTに採択され,トップ国際会議であるAIEDにもフルペーパ論文が採択された.また,人工知能学会や教育システム情報学会などの複数の国内学会で受賞した.3)については,記述回答のテキスト情報を加味して項目反応モデルのパラメータ推定を高精度に行う手法を開発した.研究成果は,査読付き国際会議IMPSで発表し,人工知能学会や言語処理学会などの国内学会でも発表した.

現在までの達成度 (区分)
現在までの達成度 (区分)

1: 当初の計画以上に進展している

理由

上述の通り,本研究のそれぞれの要素技術について順調に研究が進行しており,前年度に引き続き研究業績も多数発表している.さらに次項に示す通り,令和6年度には当初予定にない発展的な課題にも取り組む想定である.以上から,「当初の計画以上に進展している」と評価した.

今後の研究の推進方策

令和6年度には,本研究課題で開発してきたパフォーマンス評価フレームワークの要素技術を引き続き発展させるとともに,それらの成果を取りまとめて国内外の様々な学会・論文誌で発表していく.発展技術としては,1)一般的なリンケージ手法を適用できないデータ収集デザインであっても,自動採点技術を応用することでリンケージできるようにする手法,2)大規模言語モデルを応用することで,問題文の情報から項目特性値(識別力や難易度)を予測する技術,3)大規模言語モデルと項目反応理論を融合することで,所望の項目特性の問題を自動生成する手法などの開発を目指す.これらは元々の研究計画にはなかった内容であるが,本研究課題の進展と近年の飛躍的な自然言語処理技術の発展に伴い実現可能性が高まってきたものである.上述の通り,本研究課題については当初計画に沿った十分な成果が出ているため,最終年度にはこれらの発展的な課題にも挑戦していく.なお当初予定の研究計画に対する研究成果は,最終成果物を英文のハイインパクトな査読付き論文誌を中心に投稿していく.それと同時に,上述した発展技術についても研究成果を発表できるように進めていく.

報告書

(3件)
  • 2023 実績報告書
  • 2022 実績報告書
  • 2021 実績報告書
  • 研究成果

    (72件)

すべて 2024 2023 2022 2021

すべて 雑誌論文 (11件) (うち査読あり 11件、 オープンアクセス 5件) 学会発表 (61件) (うち国際学会 7件、 招待講演 5件)

  • [雑誌論文] 項目反応理論に基づく難易度調整可能な読解問題自動生成手法2024

    • 著者名/発表者名
      富川 雄斗、鈴木 彩香、宇都 雅輝
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J107-D 号: 2 ページ: 53-66

    • DOI

      10.14923/transinfj.2023JDP7028

    • ISSN
      1880-4535, 1881-0225
    • 年月日
      2024-02-01
    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] 多次元項目反応理論と深層学習を用いた複数観点同時自動採点手法2023

    • 著者名/発表者名
      柴田 拓海、宇都 雅輝
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J106-D 号: 1 ページ: 47-56

    • DOI

      10.14923/transinfj.2022JDP7007

    • NAID

      130008116647

    • ISSN
      1880-4535, 1881-0225
    • 年月日
      2023-01-01
    • 関連する報告書
      2022 実績報告書
    • 査読あり
  • [雑誌論文] Integration of Prediction Scores From Various Automated Essay Scoring Models Using Item Response Theory2023

    • 著者名/発表者名
      Uto Masaki、Aomi Itsuki、Tsutsumi Emiko、Ueno Maomi
    • 雑誌名

      IEEE Transactions on Learning Technologies

      巻: - 号: 6 ページ: 1-18

    • DOI

      10.1109/tlt.2023.3253215

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] ルーブリックを用いたパフォーマンス評価のための多次元4相型項目反応モデル2022

    • 著者名/発表者名
      宇都 雅輝
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J105-D 号: 7 ページ: 457-469

    • DOI

      10.14923/transinfj.2021JDP7042

    • ISSN
      1880-4535, 1881-0225
    • 年月日
      2022-07-01
    • 関連する報告書
      2022 実績報告書
    • 査読あり
  • [雑誌論文] A Bayesian many-facet Rasch model with Markov modeling for rater severity drift2022

    • 著者名/発表者名
      Uto Masaki
    • 雑誌名

      Behavior Research Methods

      巻: - 号: 7 ページ: 3910-3928

    • DOI

      10.3758/s13428-022-01997-z

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] 項目反応理論による小論文自動採点機のモデル平均2021

    • 著者名/発表者名
      青見 樹、堤 瑛美子、宇都 雅輝、植野 真臣
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J104-D 号: 11 ページ: 784-795

    • DOI

      10.14923/transinfj.2021JDP7002

    • ISSN
      1880-4535, 1881-0225
    • 年月日
      2021-11-01
    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] 評価者バイアスの影響を考慮した深層学習自動採点手法2021

    • 著者名/発表者名
      岡野 将士、宇都 雅輝
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J104-D 号: 8 ページ: 650-662

    • DOI

      10.14923/transinfj.2021JDP7010

    • ISSN
      1880-4535, 1881-0225
    • 年月日
      2021-08-01
    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] 受験者の能力を考慮した深層学習ベース短答記述式問題自動採点手法2021

    • 著者名/発表者名
      内田 優斗、宇都 雅輝
    • 雑誌名

      教育システム情報学会誌

      巻: 38 号: 3 ページ: 218-228

    • DOI

      10.14926/jsise.38.218

    • NAID

      130008060855

    • ISSN
      1341-4135, 2188-0980
    • 年月日
      2021-07-01
    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] Learning Automated Essay Scoring Models Using Item-Response-Theory-Based Scores to Decrease Effects of Rater Biases2021

    • 著者名/発表者名
      Uto Masaki、Okano Masashi
    • 雑誌名

      IEEE Transactions on Learning Technologies

      巻: 14 号: 6 ページ: 763-776

    • DOI

      10.1109/tlt.2022.3145352

    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] A multidimensional generalized many-facet Rasch model for rubric-based performance assessment2021

    • 著者名/発表者名
      Uto Masaki
    • 雑誌名

      Behaviormetrika

      巻: 48 号: 2 ページ: 425-457

    • DOI

      10.1007/s41237-021-00144-w

    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] A review of deep-neural automated essay scoring models2021

    • 著者名/発表者名
      Uto Masaki
    • 雑誌名

      Behaviormetrika

      巻: 48 号: 2 ページ: 459-484

    • DOI

      10.1007/s41237-021-00142-y

    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] 質問応答システムに基づく解答可能性改善機構を組み込んだ読解問題自動生成手法2024

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      人工知能学会 第100回先進的学習科学と工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 回帰と分類の多出力深層学習モデルに基づく論述回答自動採点の得点予測と確信度推定の高精度化2024

    • 著者名/発表者名
      高橋祐斗,宇都雅輝
    • 学会等名
      人工知能学会 第100回先進的学習科学と工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] ChatGPTの過剰回答を抑制する機構を組み込んだ医療面接試験向け仮想模擬患者2024

    • 著者名/発表者名
      進藤尚希,宇都雅輝
    • 学会等名
      人工知能学会 第100回先進的学習科学と工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 項目反応理論を用いた難易度調整可能な多肢選択式読解問題自動生成2024

    • 著者名/発表者名
      富川雄斗,宇都雅輝
    • 学会等名
      言語処理学会第30回年次大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 確信度と得点の予測精度を両立する論述回答自動採点モデル2024

    • 著者名/発表者名
      高橋祐斗,宇都雅輝
    • 学会等名
      言語処理学会第30回年次大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 自動採点技術と項目反応理論に基づくテスト等化を通じた論述式回答評価の高精度化2024

    • 著者名/発表者名
      荒巻洸太,宇都雅輝
    • 学会等名
      言語処理学会第30回年次大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] ChatGPTの過剰回答に対する自己フィードバック機構を組み込んだ医療面接試験向け仮想模擬患者2024

    • 著者名/発表者名
      進藤尚希,宇都雅輝
    • 学会等名
      言語処理学会第30回年次大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 文章変換技術に基づくデータ拡張を用いた問題横断型自動採点手法2024

    • 著者名/発表者名
      伊藤佑真,宇都雅輝
    • 学会等名
      教育システム情報学会学生研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 問題と模範解答を同時に生成する難易度調整機能付き読解問題自動生成手法2024

    • 著者名/発表者名
      後藤照佳,富川雄斗,宇都雅輝
    • 学会等名
      教育システム情報学会学生研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 解答可能性の評価機構を組み込んだ難易度調節可能な読解問題自動生成手法2024

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      電子情報通信学会 教育工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] ChatGPTの過剰解答に対するフィードバック機構を組み込んだ客観的臨床能力試験のためのシナリオ対話AI2024

    • 著者名/発表者名
      進藤尚希,宇都雅輝
    • 学会等名
      電子情報通信学会 教育工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 歯学生臨床実習前OSCEの評価者の評価におけるIRT利用について2024

    • 著者名/発表者名
      宇都雅輝
    • 学会等名
      試験信頼性妥当性検討委員会第24回講演会
    • 関連する報告書
      2023 実績報告書
    • 招待講演
  • [学会発表] Difficulty-Controllable Neural Question Generation for Reading Comprehension using Item Response Theory2023

    • 著者名/発表者名
      Masaki Uto, Yuto Tomikawa, Ayaka Suzuki
    • 学会等名
      18th Workshop on Innovative Use of NLP for Building Educational Applications
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Neural automated essay scoring considering logical structure2023

    • 著者名/発表者名
      Misato Yamaura, Itsuki Fukuda, Masaki Uto
    • 学会等名
      24th International Conference on Artificial Intelligence in Education
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Neural Automated Short-Answer Grading Considering Examinee-Specific Features2023

    • 著者名/発表者名
      Masaki Uto
    • 学会等名
      23rd IEEE International Conference on Advanced Learning Technologies
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Linking method for writing tests using item response theory and automated essay scoring2023

    • 著者名/発表者名
      Kota Aramaki, Masaki Uto
    • 学会等名
      International Meeting of the Psychometric Society
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] ドメイン調整可能な文章変換技術を用いた問題横断型自動採点手法2023

    • 著者名/発表者名
      伊藤佑真,宇都雅輝
    • 学会等名
      人工知能学会 第99回先進的学習科学と工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 回帰と分類のマルチタスク学習を適用した深層学習自動採点の不確かさ推定2023

    • 著者名/発表者名
      高橋祐斗,宇都雅輝
    • 学会等名
      電子情報通信学会 教育工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 問題と模範解答の同時生成機構を持つ難易度調整可能な読解問題自動生成手法2023

    • 著者名/発表者名
      後藤照佳,富川雄斗,宇都雅輝
    • 学会等名
      電子情報通信学会 教育工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 読解対象文の難易度を考慮した読解問題自動生成手法2023

    • 著者名/発表者名
      富川雄斗,宇都雅輝
    • 学会等名
      教育システム情報学会第48回全国大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 評価者特性を考慮した項目反応モデルと深層学習自動採点技術に基づく記述式テストの等化手法2023

    • 著者名/発表者名
      荒巻洸太,宇都雅輝
    • 学会等名
      日本テスト学会第21回大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] オンライン授業での論述テキストによる学習者特性の推定に関する一検討2023

    • 著者名/発表者名
      中山実,宇都雅輝,菊池聡,山本洋雄
    • 学会等名
      電子情報通信学会 教育工学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 深層学習自動採点技術と項目反応理論を用いた記述,論述式テストの等化手法2023

    • 著者名/発表者名
      荒巻洸太,宇都雅輝
    • 学会等名
      第37回人工知能学会全国大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 深層学習と項目反応理論を用いた難易度調節可能な読解問題自動生成手法2023

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      第37回人工知能学会全国大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 論述構造解析を用いたニューラル小論文自動採点手法の提案2023

    • 著者名/発表者名
      山浦美里,福田樹,宇都雅輝
    • 学会等名
      第37回人工知能学会全国大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Analytic Automated Essay Scoring based on Deep Neural Networks Integrating Multidimensional Item Response Theory2022

    • 著者名/発表者名
      Takumi Shibata, Masaki Uto
    • 学会等名
      International Conference on Computational Linguistics
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] 小論文の分析的評価のための項目反応理論を用いた深層学習自動採点手法2022

    • 著者名/発表者名
      柴田拓海,宇都雅輝
    • 学会等名
      教育システム情報学会第47回全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 深層学習を用いた難易度調整機能付き読解問題自動生成手法2022

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      教育システム情報学会第47回全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 評価者の厳しさの時間変化を検出する時系列型ベイズ多相ラッシュモデル2022

    • 著者名/発表者名
      宇都雅輝,林真由
    • 学会等名
      教育システム情報学会第47回全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 難易度調節可能な読解問題自動生成のための深層学習手法2022

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      日本テスト学会第20回大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 多次元項目反応理論を組み込んだ深層学習モデルに基づく小論文の観点別自動採点手法2022

    • 著者名/発表者名
      柴田拓海,宇都雅輝
    • 学会等名
      日本テスト学会第20回大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 評価者特性ドリフトを検出する時系列型ベイズ多相ラッシュモデル2022

    • 著者名/発表者名
      宇都雅輝,林真由
    • 学会等名
      日本テスト学会第20回大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 深層学習自動採点技術を用いた一般化多相ラッシュモデルの等化手法2022

    • 著者名/発表者名
      荒巻洸太,宇都雅輝
    • 学会等名
      行動計量学会第50回大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Transformerモデルを用いた難易度調節機能付き読解問題自動生成手法2022

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      行動計量学会第50回大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 深層学習と多次元項目反応理論を用いた小論文の観点別自動採点2022

    • 著者名/発表者名
      柴田拓海,宇都雅輝
    • 学会等名
      行動計量学会第50回大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 評価者特性の時間変動を推定する時系列型ベイズ多相ラッシュモデル2022

    • 著者名/発表者名
      宇都雅輝,林真由
    • 学会等名
      行動計量学会第50回大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] ルーブリックを用いたライティング評価のための多次元項目反応モデル2022

    • 著者名/発表者名
      宇都雅輝
    • 学会等名
      第21回情報科学技術フォーラム
    • 関連する報告書
      2022 実績報告書
    • 招待講演
  • [学会発表] 論述構造解析を組み込んだニューラル小論文自動採点手法2022

    • 著者名/発表者名
      山浦美里,福田樹,宇都雅輝
    • 学会等名
      人工知能学会 第96回 先進的学習科学と工学研究会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 歯学系臨床実習前OSCEの評価者の評価におけるIRT利用について2022

    • 著者名/発表者名
      宇都雅輝
    • 学会等名
      試験信頼性妥当性検討委員会第 22 回講演会
    • 関連する報告書
      2022 実績報告書
    • 招待講演
  • [学会発表] 読解対象文の難易度を考慮した読解問題自動生成手法2022

    • 著者名/発表者名
      富川雄斗,宇都雅輝
    • 学会等名
      教育システム情報学会学生研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] アンサンブル法に基づく深層学習自動採点の不確かさ推定2022

    • 著者名/発表者名
      高橋祐斗,宇都雅輝
    • 学会等名
      教育システム情報学会学生研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 項目反応理論と深層学習を用いた難易度調節可能な読解問題自動生成手法2022

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      人工知能学会 第97回先進的学習科学と工学研究会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 項目反応理論に基づく難易度調節可能な読解問題自動生成手法2022

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      言語処理学会第29回年次大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 論述構造解析技術を用いたニューラル小論文自動採点手法2022

    • 著者名/発表者名
      山浦美里,福田樹,宇都雅輝
    • 学会等名
      言語処理学会第29回年次大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 多次元項目反応理論と深層学習に基づく複数観点同時自動採点手法の精度改善2022

    • 著者名/発表者名
      柴田拓海,宇都雅輝
    • 学会等名
      言語処理学会第29回年次大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 難易度調整機能を持つGPT-2に基づく読解問題自動生成手法2022

    • 著者名/発表者名
      鈴木彩香,宇都雅輝
    • 学会等名
      教育システム情報学会学生研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 評価者特性の時間変動を考慮した項目反応モデル2022

    • 著者名/発表者名
      林真由,宇都雅輝
    • 学会等名
      教育システム情報学会学生研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] アノテータ特性を考慮した項目反応モデルを組み込んだ深層学習自動採点手法2022

    • 著者名/発表者名
      岡野将士,宇都雅輝
    • 学会等名
      言語処理学会第28回年次大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 多次元項目反応理論と深層学習に基づく複数観点同時自動採点手法2022

    • 著者名/発表者名
      柴田拓海,宇都雅輝
    • 学会等名
      言語処理学会第28回年次大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] A Multidimensional Item Response Theory Model for Rubric-based Writing Assessment2021

    • 著者名/発表者名
      Masaki Uto
    • 学会等名
      International Conference on Artificial Intelligence in Education
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Integration of Automated Essay Scoring Models using Item Response Theory2021

    • 著者名/発表者名
      Itsuki Aomi, Emiko Tsutsumi, Masaki Uto, Maomi Ueno
    • 学会等名
      International Conference on Artificial Intelligence in Education
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] 項目反応理論を用いた自動採点モデルの統合手法2021

    • 著者名/発表者名
      青見樹,堤瑛美子,宇都雅輝,植野真臣
    • 学会等名
      第35回人工知能学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 臨床実習前OSCEにおける評価項目群のステーション間および課題間比較2021

    • 著者名/発表者名
      吉田素文,内田啓子,森本剛,仁田善雄,野上康子,宇都雅輝,齋藤宣彦
    • 学会等名
      第53回医学教育学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 学生からみた診療参加型臨床実習の現状と臨床実習前OSCEの影響:全国医学部調査報告22021

    • 著者名/発表者名
      森本剛,内田啓子,吉田素文,宇都雅輝,野上康子,片桐瑞希,仁田善雄,齋藤宣彦
    • 学会等名
      第53回医学教育学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 教員からみた診療参加型臨床実習の現状と臨床実習前OSCEの影響:全国医学部調査報告12021

    • 著者名/発表者名
      内田啓子,森本剛,吉田素文,宇都雅輝,野上康子,片桐瑞希,仁田善雄,齋藤宣彦
    • 学会等名
      第53回医学教育学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 深層学習自動採点技術を組み込んだ一般化多相ラッシュモデル2021

    • 著者名/発表者名
      岡野将士,宇都雅輝
    • 学会等名
      日本テスト学会 第19回大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] ルーブリック評価のための多次元4相型項目反応モデルの提案2021

    • 著者名/発表者名
      新田森,宇都雅輝
    • 学会等名
      日本テスト学会 第19回大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] テストとAI2021

    • 著者名/発表者名
      宇都雅輝
    • 学会等名
      日本テスト学会 第19回大会
    • 関連する報告書
      2021 実績報告書
    • 招待講演
  • [学会発表] 多次元項目反応理論と深層学習を用いた複数観点同時自動採点手法2021

    • 著者名/発表者名
      柴田拓海,宇都雅輝
    • 学会等名
      人工知能学会 第93回 先進的学習科学と工学研究会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] OSCEにおけるIRT利用について2021

    • 著者名/発表者名
      宇都雅輝
    • 学会等名
      公益社団法人医療系大学間共用試験実施評価機構 試験信頼性向上部会第20回講演会
    • 関連する報告書
      2021 実績報告書
    • 招待講演
  • [学会発表] 深層学習と多次元項目反応理論を用いた複数観点同時自動採点手法の開発2021

    • 著者名/発表者名
      柴田拓海,宇都雅輝
    • 学会等名
      電子情報通信学会 教育工学研究会
    • 関連する報告書
      2021 実績報告書

URL: 

公開日: 2021-04-28   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi