研究課題/領域番号 |
16K00166
|
研究機関 | 国立情報学研究所 |
研究代表者 |
孟 洋 国立情報学研究所, コンテンツ科学研究系, 助教 (60312203)
|
研究期間 (年度) |
2016-04-01 – 2019-03-31
|
キーワード | マルチメディア情報処理 / 映像解析 / 映像応用システム |
研究実績の概要 |
本研究の目的は、日々放送されているニュース番組を収集し、繰り返し放送される映像、及び同一、継続などの話題構造の情報から、話題の要となる人物や場所、状況などを示す映像要素(画像領域や映像区間)を抽出する手法を検討するとともに、長期間のニュースを様々な視点から概観できるような映像応用システムへの展開を図ることにある。
平成28年度は、主要な映像要素を抽出するための準備として、特定の期間のニュース番組の映像を対象に、3つの初期的な解析を実施した。1つ目は、映像の視点から解析をすすめるため、映像情報から同一/類似の画像フレームの抽出およびそれらの出現分布の取得を行い、話題を代表し得る画像候補の識別を試みた。2つ目は、キーワードの視点から解析をすすめるため、文字情報から注目度の高いキーワードの抽出および出現分布の取得を行い、映像との対応関係を調査した。3つ目は、話題の視点から解析をすすめるため、文字情報から話題の分割およびそれらが同一の話題かどうかの判定を行い、各話題に対応する映像のセットを求めた。
現時点では、初期的な解析結果を得るまでにとどまっているものの、これらの結果をあわせることで、いくつかの話題を代表する映像の一部を選定することができた。一方で、ニュース番組では、繰り返し放送される映像とともに、日々更新される新たな映像も重要であることから、それらの識別方法についても検討し、本研究で対象とすべき主要な映像要素の範囲を明確にした。
|
現在までの達成度 (区分) |
現在までの達成度 (区分)
3: やや遅れている
理由
複数のニュース番組を対象に実験を行うことを予定していたが、各ニュース番組の番組構造の違いの影響が大きく、その整理が十分に行えなかったことから、今年度は特定の番組、特定の期間のみのデータの解析にとどまった。
|
今後の研究の推進方策 |
既存の放送映像アーカイブシステムで蓄積されたニュース映像に対し、映像要素および話題構造の正解データを作成する。人手により、話題単位へ分割し、発生、継続など各話題の関係性を求める。また話題を代表する映像要素の選択、ラベル付けを実施し、その分布状況を整理することで、意味を持つと思われる映像要素の選択指針について考察を加える。
また、顔検出技術など画像認識技術を活用し、画像内で有意と考えられる画像領域の候補を求めると同時に、映像として繰り返し放送される範囲、同一オブジェクトの存在範囲、動作の連続性をとおして、映像要素として意味を持つ画像領域、映像区間の範囲を決定する手法の検討を行い、作成した正解データを活用して、提案手法の検証を行う。
最終的には、ニュースの話題やその経過を要約提示でき、適応的に長期間にわたるニュース映像を概観することができる映像年表の構築など、応用システムの開発をすすめ、本研究の有効性を確認する。
|
次年度使用額が生じた理由 |
平成28年度において、研究計画時、既存の放送映像アーカイブに蓄積された大量のニュース映像データの解析を実施するために映像特徴計算・照合用サーバを計上したが、本年度は特定期間の映像データのみ解析を実施したため、導入を見送った。
|
次年度使用額の使用計画 |
平成29年度は、映像特徴計算・照合用サーバを導入し、長期間にわたるニュース映像データの解析を実施する。また基準となる正解データの整備をすすめ、提案手法の検証、および手法の設計に活用する。
|