| 研究概要 |
前年度の研究成果に基づき,本年度は以下の研究課題に取り組んだ。
1. 対話支援型問題解決過程における知識獲得方式の検討
対話により獲得する知識を,教師のもつ問題解決のための経験則的知識と考え,具体的に(1)コマンドのパラメータの制約条件,(2)コマンドの共起関係,(3)問題のタイプ毎のコマンド系列のパターンとした。これらを蓄積するためのスロットをコマンドフレームに追加するとともに,新たに問題解決フレームを導入した。さらに,対話を繰り返すことにより知識が確定的なものになっていく過程を確信度と呼ぶパラメータで表現した。既存の対話処理プログラムに確信度の更新手続きならびに確信度に基づく発話文生成手続きを追加して実験を行い,その有効性を確かめた。
2. 教師のポインティングジェスチャ動画像の認識
ビデオカメラを机上の状況を観測できる位置に固定し,机上のデキストならびに教師の指(またはペン)によるポインティングジェスチャや描画動作を一連の動画像データとして取り込めるような環境を構築した。まず,カメラ入力によるテキストのみの画像とスキャナ入力によるテキスト画像との座標の対応付けを行うプログラムを開発した。これがジェスチャの背景画像となる。次に,背景画像との現画像との差分処理,しきい値処理,領域特徴抽出処理により,指(ペン)の位置の軌跡を検出するプログラムを開発した。
3. 図形メディアと言語メディアとの対応付け
画像データとして取り込まれた教師のジェスチャと,同時になされる発話文の意味構造を対応付けることにより,教師の伝えたい情報を決定するための方式について検討した。決定に当たっては,対話と問題解決過程の履歴を保存した文脈情報を利用している。さらに,対話を音声で行うための認識予備実験を行い,現在の初等数学の知識獲得というタスクにおいては,十分に利用できる見通しを得た。
|
