2012 Fiscal Year Research-status Report
| Project/Area Number |
23650556
|
|---|
| Research Institution | Kinjo College |
|---|
Principal Investigator |
新井 浩 金城大学短期大学部, その他部局等, 准教授 (30331557)
|
|---|
| Keywords | 教師教育 / 教授力 / 口話力 / FD |
|---|
| Research Abstract |
我々の研究は、大学教員の教授力向上のために、言語的・非言語的コミュニケーション能力を成長させる事を目標とした「音声認識技術を活用した自習可能な口話システム」を開発する事である。従来あるビデオ撮影による授業改善と違い、録音した自分の講義を全て視聴せずとも評価を受ける事ができる。また口話の評価に用いる音声認識技術を使うため、自習者自身による主観評価でなくソフトウェアによる客観的評価を得られる。
開発にあたり我々はプロジェクトを①スピーチモノマネシステムの構築②音声データベースの構築③顔型ユーザーインターフェースの構築という３段階にわけて開発する事を計画し、平成２４年度は②の音声データベースの構築と③顔型ユーザーインターフェースの構築の一部に取り組んだ。
手本となる日本語話し方音声コーパスから任意で男性３２名・女性２９名の音声データをを取り出し、5名の評価者（教員）により主観評価を行った。主観評価にあたってはルーブリック指標を作成し、評価尺度の平準化を図った。
これらと並行して、ベクターデータで顔グラフの表示パターンを90種類ほど作成し、音声の大小や高低などの変化に対応させる部位を検討したフェイスグラフマップを作成した。レーダーチャートで示していた結果から、顔型ユーザーインターフェースで表示するためのルール作りを検討した。システムを統合するための構成要素に着手し、最終年度で行う開発の準備を整える事ができた。
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
（理由）
２年目の研究計画は「手本音声データベースの構築」と結果の直感的理解のために「顔型ユーザーインターフェースの開発」であった。
手本音声データベースについては、話し方の善し悪しを主観評価するためルーブリック評価を取り入れ、日本語話し方音声コーパスを活用して手本音声の収集を行う方法を確認した。音声データの比較に使用する5項目のうち、音声認識技術を用いて抽出する「明瞭さ・滑舌」値の最適化が遅れており、現在は暫定的に4項目で開発を進めている。
顔形ユーザーインターフェースについては、音声の時間的変化に擬似的に対応したプロトタイプを作成し、表示の妥当性についてアンケートを実施した。直感的な合否判定においては期待通りの結果が出たが、改善点の理解は他のグラフに劣る結果が出た。そこで顔型グラフの表示ルールを見直し改良版を作成している。
|
| Strategy for Future Research Activity |
手本音声データベースに集積された音声データより、音声認識技術を用いて「明瞭さ・滑舌」値を取得し、「声の大小」「声の高低」「話す速さ」「間合い」とあわせて音声パラメータとしてスコア化したものを最適値を設定する事で使用する。新たに音声認識技術の協力者に依頼を予定している。現在作成した顔型ユーザーインターフェースのプロトタイプを改良し音声特性値と関連づけ、システムとして完成させる。また最終的には3次元モデリングの顔型グラフUIにより表現し、評価の臨場感を向上させる。
また、実際の講義での使用や話し方テストでの簡易利用を想定した実地テストを行い結果の妥当性について検証する。
|
| Expenditure Plans for the Next FY Research Funding |
平成23年度には音声データを解析するためのワークステーションや解析用ソフト、実地テストに用いるノートパソコンの購入を行い開発環境を整えた。平成24年度は国内発表１回、国外発表１回を行い､研究成果の発表と情報収集を行った。
平成25年度は、研究の最終年度にあたり研究成果発表と情報収集を兼ね、国内・国外学会参加の為の旅費を計上した。今年度は国内発表2回、海外発表を1回予定している。
また、実地テストでの協力者謝金、改善点に関する専門知識の提供、データ処理に関わる人件費、音声特性データベースや顔形グラフを構築するためのソフト購入費等を物品費に計上した。その他、学会参加登録費や会議費、先行研究調査ひようとして文献複写、書籍購入費などを予定している。
|
Research Products
(3 results)
