2000 Fiscal Year Annual Research Report
講義ビデオのハイパーメディア化と内容記述によるマルチメディア教材の研究
| Project/Area Number |
11480081
|
|---|
| Research Institution | Ryukoku University |
|---|
Principal Investigator |
有木 康雄 龍谷大学, 理工学部, 教授 (10135519)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
熊野 雅仁 龍谷大学, 理工学部, 助手 (50319498)
川上 肇 龍谷大学, 理工学部, 助手 (60298734)
小淵 洋一 龍谷大学, 理工学部, 教授 (60025450)
|
|---|
| Keywords | ディジタルアーカイブ / ハイパーリンク / 音声ディクテーション / 映像要約 / 信頼度 / 内容記述 / 類似映像 / テロップ |
|---|
| Research Abstract |
平成12年度は,ディジタル化されたビデオ教材を構造化し,目次を作成することを目標として研究を行った.また,構造化された教材に対して,部分的にハイパーリンクを張る研究を行った.ハイパーリンクを張る対象は,テレビで放映されているニュース映像を想定しており,今年度は、ニュース映像に対しても,構造化の研究を行った.
1.音声ディクテーション機能の強化:講師の発話には,言い淀みやいい間違いが含まれている.このような文法逸脱に対応できるよう,音声ディクテーションの機能を強化した.具体的には,話し言葉の言語モデルを使用し,認識の信頼度と話者適応を併用する音声ディクテーションの方法を提案した.
2.内容記述の統合:ニュース映像の各シーンにおいて,重要な映像フレームを統計的に判定し,その映像フレーム集合を作成することで,コンテンツの要約を作成する研究を行った.
3.映像中のオブジェクトに関するハイパーリンク:各シーンにおいて,映像中に映っているオブジェクトを抽出・追跡し,同じようなオブジェクトの動きを持つ映像について,同値類と判断して相互にリンクをはる研究を行った.しかし,映像中の物体を抽出・追跡する研究にとどまり,現時点では,まだ相互にリンクを張るところまで研究が進んでいない.平成13年度に,引き続き研究を行う予定である.
4.概念に対応するシーン集合を発見するための自己組織化:音声ディクテーションやテロップ・フリップから抽出したキーワードをベースに,1つの概念のまとまりを発見する研究を進めた.具体的には,テロップはコンテンツのまとめを表しているので,音声ディクテーションされたテキストからテロップの内容と関連の最も強い部分を自動的に取り出し,相互の関連を求めた.この音声テキストは,テロップが表す一つの概念に対応しており,これを基にコンテンツの要約を作成することができる.
|
-
[Publications] 西田昌史,有木康雄: "話者固有空間における動的・静的特徴統合による話者照合"電子情報通信学会論文誌. DII. 2536-2544 (2000)
-
[Publications] Yasuo Ariki: "Multimedia Technologies for Structuring and Retrieval of TV News"New Generation Computing. Vol18. 341-358 (2000)
-
[Publications] Y.Ariki and S.Tako: "Study on New Term Weighting Method and New Vector Space Model Based on Word Space in Spoken Document Retrieval"RIAO00. 116-131 (2000)
-
[Publications] Yasuo Ariki: "Organization and Retrieval of Continuous Media"ACM MIR2000. 221-226 (2000)
-
[Publications] S.Sakamoto and Y.Kobuchi: "Convergence Property of Topographic Mapping Formation from Cell Layer to Cell Layer through Correlation Learning Rule"Neural Networks. Vol.13 No.7-8. 11-20 (2000)
-
[Publications] Y.Kobuchi,T.Saito,and H.Nunome: "Semantics analysis through elementary meanings-Theoretical foundation for generalized thesaurus construction-"Acta Informatica. Vol.37. 1-19 (2000)
