| 研究概要 |
本年度の研究は、昨年度購入した赤外線と超音波により筆記用具の位置をリアルタイムで検出する会議支援装置(ペン位置検出装置)とパンチルトズームがパソコンから制御できるネットワークカメラを使用して,研究を進めた。その結果以下のような研究が実施できた。
1 このペン位置検出装置を使用すると,ホワイトボードに記入した文字や図形が光の輝度の変化の影響を受けずに安定して2値化でき,講師が筆記した文字や図形(板書領域)を正確に抽出できた.そこで,文字を書いた位置(空間情報)から板書領域を空間ブロック、講師の書いた時間的な順序(時間情報)から時間ブロックに分解した。そして時間ブロックについて、一行ごとに分離する処理(行の分離)を行い、各行に対して個別文字を分離するアルゴリズムを考察し、接触している個別文字に分解し、文字認識ソフトウェアにより文字認識を行った。
2 1で文字認識した文字列をキーワードとして、あらかじめコンピュータの辞書に登録しておいたキーワードと対応づけを行い、完全にキーワードと一致していなくても、似ているキーワードが参照できる機能を実現した。そして、教科書の前文テキストからキーワードの説明部分を自動抽出し、キーワードの説明文を授業映像ベータベースにタグとして付加し、授業映像に同期して別のウィンドウで自動的にキーワードの説明を参照できるシステムを構築した。
3 遠隔地の受講生に配信する映像について考察し、"ホワイトボードに記入された板書領域"と講師の動作認識によりカメラの視野が動的に変化する"ネットワークカメラの映像"をカメラマンなしで自動的に切り替えるアルゴリズムを考察し、コンピュータでの実現性について研究した。
|
