2002 Fiscal Year Annual Research Report
人物行動を伝えるための映像文法を用いた知的映像撮影・編集システムの構築
Project/Area Number |
14019010
|
Research Institution | University of Tsukuba |
Principal Investigator |
中村 裕一 筑波大学, 機能工学系, 助教授 (40227947)
|
Co-Investigator(Kenkyū-buntansha) |
星野 准一 筑波大学, 機能工学系, 講師 (40313556)
今泉 容子 筑波大学, 文芸・言語学系, 助教授 (40151667)
|
Keywords | 知的映像撮影 / 知的映像編集 / マルチメディア / 対話的映像メディア / 人工知能不用 / コミュニケーション |
Research Abstract |
本研究では,情報学的な見地から,「効果的に情報を提示するために,どのような映像部品(単語)を用意し,どのような映像編集規則(文法)にしたがって提示すればよいか」という問題を自動化システムを構築しながら実証的に探ることを目的としている.そのために,本年度は主に,対話シーンを撮影・編集・伝送するマルチカメラシステムの構築,制約充足に基づく編集の枠組みに関する検討,インタラクティブに質問に対して答えることのできる映像メディアの構築を行った.以下のように,順調に研究が進行している. 撮影・編集環境の構築:昨年度に引き続き,マルチカメラによる撮影,人物行動認識,映像編集を行うシステム構築を行った.現在はまだ,システマティックな検証を行うために必要な機能の一部しか備わっていないが,以下の節で示すような実験が可能になった. 制約充足型映像編集モデル:TV番組,映画に現れる種々のシーンを参考にし,種々の編集を可能にするモデルの検討を行った.日本映画においては,対話シーンとして食卓やテーブルでの飲食シーンが用いられることが多いため,そのパターン化を行い,また,各部分について,その意図,効果について考察した.これらの結果を基に,リアルタイムの編集と制約充足で編集を行う枠組みの検討を行った. 質問に答えることのできる映像メディア:「質問と答」の観点から映像の撮影と編集を考え、多視点の映像を効果的に使用するモデル(QUEVICO)を提案した.質問の答となる映像断片を検索するために適した映像のインデキシング手法を提案し,検索された映像断片を要約、編集することで簡潔な答をユーザに与える手法を実装した。
|
-
[Publications] 尾関, 中村, 大田: "Human Behavior Recognition System for an Intelligent Video Production System"Proc.Pacific-Rim Conference on Multimedia. 1153-1160 (2002)
-
[Publications] 久保田, 中村, 大田: "Detecting Scenes of Attention from Personal View Records"Proc. IAPR Workshop on Machine Vision and Applications. 209-213 (2002)
-
[Publications] 村山, 中村, 大田: "Flexible Diagram Generation from Tagged Texts"Proc. Sixth Int'l Conference on Knowledge-Based Intelligent Information & Engineering Systems. 582-587 (2002)
-
[Publications] 伊津野, 中村, 大田: "QUEVICO : A framework for video-based Interactive Media"Int'l Workshop on Intelligent Media Technology for Communicative Reality. 6-11 (2002)
-
[Publications] 尾関, 伊藤, 中村, 大田: "Tracking Hands and Objects for an Intelligent Video Production System"Proc. IAPR Int'l Conference on Pattern Recognition. 1011-1015 (2002)
-
[Publications] 村山, 中村, 大田: "Doc Scape:文章の概覧性を高めるための概念図の生成と利用"情報処理学会論文誌. 44・4(掲載予定). (2003)
-
[Publications] 中村, 尾関, 大田: "An Intelligent System for Capturing Presentations on Desktop Manipulations 10章 書名「Virtual Environments for Teaching and Learning」"World Scientific Publishing Company. 31 (2002)