| 研究課題/領域番号 |
23K02344
|
|---|
| 研究機関 | 大分大学 |
|---|
研究代表者 |
|
|---|
| 研究分担者 |
大下 晴美 大分大学, 医学部, 准教授 (00618887)
岩城 貴史 大分大学, 医学部, 助教 (60416419)
|
|---|
| 研究期間 (年度) |
2023-04-01 – 2027-03-31
|
| キーワード | 英語医療面接 / 自動評価システム / AI |
|---|
| 研究実績の概要 |
新型コロナウィルス感染症が第5類感染症に移行して以降，訪日外国人数は急速に増加しており，これに伴い，日本の医療機関を受診する外国人の数も今後ますます増加すると予測される。そのため，医療従事者の英語力育成は日本の医療の国際化を図るためにも喫緊の課題となっている。本研究では，医療系学生の英語学習支援ツールとしてだけではなく，医療従事者の生涯学習ツールとしても活用できるように，AI技術を用いて「英語医療面接自動採点システム」を開発することを目的としている。
1年目である2023年度には，(1)CBT(Computer-Based Testing)形式のディスコース完成タスクと評価指標の作成，(2)発話データの収集，(3)発話データの分析と音声データ処理を行う予定であった。(1)に関しては，作成したタスクと評価指標を用いて予備調査を医学科の学生約110名に実施した。その結果，タスクの難易度に問題があり，再作成する必要があることが明らかになった。(2)については，約350名分を収集したが，研究期間内に収集するデータ数ではAI学習アルゴリズムの開発に不十分であるという結果を得，参加した研修会での助言を得て，利用ツールを変更することとした。具体的には，音声認識にgoogleのspeech_recognitionライブラリ，OpenAIのwhisperライブラリ，およびwhisperクラウドAPIを，評価ツールとしてChat GPTを使用し，簡易版のAI学習アルゴリズムを試作した。収集した学生の音声データをサンプルとして予備調査を行った結果，これまでに試したライブラリ・APIでは学生の英語音声が発音・流暢性の問題から正確に文字化できていないこと，Chat GPTの評価基準が教師の評価基準と大きく異なる場合があることが分かり，今後修正する必要があることが明らかになった。
|
| 現在までの達成度 (区分) |
現在までの達成度 (区分)
2: おおむね順調に進展している
理由
CBT(Computer-Based Testing)形式のディスコース完成タスクについては，予備調査の結果，問題が指摘されたが，すでに改訂案を協議しており，順調に進んでいる。また，本研究の申請当時は，音声認識ツールおよび評価ツールを自ら開発する予定であったが，参加した研修会での助言を得て，音声認識のライブラリもしくはAPIとChat GPTを利用するという発想により，当初の予定より早く簡易版を試作することができた。特にChat GPTを評価補助ツールとして使用することによって，研究期間内に収集する音声データ数が不十分であるという問題点も解消することができるため，採点システムの精度の向上が期待できると考える。
|
| 今後の研究の推進方策 |
2024年度は，予備調査で明らかになった以下の3点の問題の修正を行い，2025年度の英語医療面接自動採点システムの運用に向けた準備を行う。まず，CBT(Computer-Based Testing)形式のディスコース完成タスクを再作成する。昨年度の難易度の問題点を踏まえてタスクを作成し，予備調査を行うことによって，タスクの信頼性・妥当性を評価する。次に，作成したタスクを基に，Chat GPTの評価基準と教師の評価基準を比較検証し，Chat GPTのファインチューニングを行うことによって，教師の評価基準に合うようにAI学習アルゴリズムの設定を行う。さらに，学生の不完全な英語発話をできるだけ正しく認識・文字化できるように，音声認識機能を利用したテキスト化の精度・音声認識のトレーニング方法を検証する。以上の内容を研究成果として，学会での口頭発表および論文として発表する予定である。
|
| 次年度使用額が生じた理由 |
本年度はサーバーの設置を行わずに作業を行うことができたため，次年度使用額が生じた。2024年度は，2025年度の英語医療面接自動採点システムの公開・運用に向けたインタフェース実装のための費用，および精度や利用を広げるためのChat GPTや音声認識のライブラリ・APIの使用料等が必要となるため，2023年度の未使用額と次年度予算を合算し，使用する予定である。
|
