2005 Fiscal Year Annual Research Report
映像解析技術を用いたプレゼン映像資料に対する全文検索システムの開発
| Project/Area Number |
17500644
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (C)
|
| Research Institution | The University of Tokushima |
|---|
Principal Investigator |
獅々堀 正幹 徳島大学, 工学部, 助教授 (50274262)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
北 研二 徳島大学, 高度情報化基盤センター, 教授 (10243734)
柘植 覚 徳島大学, 工学部, 講師 (00325250)
|
|---|
| Keywords | 講義資料 / 講義映像 / e-learning / 映像解析 / 情報検索 / 映像配信 |
|---|
| Research Abstract |
本研究では,膨大なプレゼン資料の中から学習者の検索要求に適合したページを検索し,そのページの内容を解説した音声情報や映像情報と共にプレゼン資料をユーザに配信する全文検索システムの開発を目的とする.平成17年度における研究実績を項目毎に報告する.
1.プレゼン映像資料解析技術の開発
プレゼン映像資料となる講義映像は一連の連続的なフレーム画像の集合であるため,通常の映像に含まれるカットシーンに対応した区切り情報が存在しない.本研究では,プレゼン映像内の各フレーム画像間の類似性を解析し,プレゼン映像資料の切り替り時点,及び映像内でのアニメーションの発生時点を特定する技術を開発した.
2.プレゼン資料から言語情報抽出技術の開発
本研究ではプレゼン資料作成用ソフトをMicrosoft社製品であるPowerPointに絞り,プレゼン資料からフォント情報付きのテキスト情報を抽出する技術,及び資料内に出現する各単語をフォント情報付きで切出す技術を開発した.また,テキスト化されたプレゼン資料からは,各言語情報の出現位置,出現頻度を抽出し,各出現単語の重み付けを行う技術を確立した.
3.プレゼン映像資料と言語情報のマッピング技術の開発
2.で抽出した言語情報をプレゼン資料内で出現するページ毎に分類し,1.で検出したプレゼン映像資料中のページ切り替わり時点もページ毎に分類する.分類した結果をもとに,資料の各ページに存在する言語情報と,そのページの映像内での切り替わり時点とをマッピングする技術を開発した.これにより,各言語情報が映像中のどのフレーム時刻で出現したか,また,どの程度の時間長で表示されたかといった情報を獲得することが可能になり,検索結果の順位付けに反映することが可能になった.
4.高速全文検索エンジンの開発
マッピング情報を索引化し,検索単語に適合するプレゼン映像を高速に検索可能な検索エンジンを開発した.
5.インターフェイスの設計
検索単語に適合するプレゼン映像と講義風景を配信するインターフェイスを作成した.
|
Research Products
(6 results)
