研究課題
基盤研究(C)
コンピュータが我々人間の実生活内において真のパートナーと成り得るために、マルチメディアを対象とした意味解析・理解に関する重点的な研究が急務である。これまでは話題の中心に据えられた人物やモノについてのみ注意が向けられていたが、そのような表層的かつ部分的な意味抽出だけでは十分にコンテンツを理解したとはいえず、より踏み込んだ意味解釈の実現を目指す必要がある。本研究課題では、マルチメディア素材のひとつである絵本を具体例に、登場人物/モノだけでなく、絵本に表現されている物語性という意味背景にまで踏み込んだメディア理解を実現し、絵本を自動生成する機構の構築を目標とした。具体的には以下のような成果を得た。与えられた物語文章から絵を自動生成することが出来るようになり、これは人間のメディア理解の枠組みを研究するひとつのモデルと捉えられる。1.メディア理解及び活用に関する基礎的研究メディアのあるべき特性について、コンピュータと人間をつなぐ媒体としての視点から指針を提示し、新たな研究領域の開拓のきっかけ作りを行った。2.場面解析ならびに主人公/重要登場人物の抽出絵本の画面展開の文法として認識されている幾つかの項目を取り上げ、その作用や意義などについて工学的な視点から整理した。さらに物語文章に含まれる意味レベルの解析結果も踏まえて、場面(段落)ならびに主人公/重要登場人物を自動抽出する手法を具体的に実装した。3.概念意味の視覚イメージへの展開項目2で求めた概念意味を具体的に視覚イメージとして表出させるための機構を実現した。人物動作を表す単語の類型化を行い、さらに意味内容を効果的に伝達することができるようなカメラワーク規則を抽出・実装した。
すべて 2007 2006 2005 2004
すべて 雑誌論文 (15件)
人工知能学会言語・音声理解と対話処理研究会資料 49-10
ページ: 51-56
International Journal of Computational Science and Engineering (印刷中)
JSAI Technical Report of SIG-SLUD
ページ: 49-10
International Journal of Computational Science and Engineering (in print)
情報処理学会コンピュータビジョンとイメージメディア研究会資料 152-18
ページ: 129-136
Proc., ACM International Working Conference on Advanced Visual Interfaces
ページ: 108-111
情報処理学会ヒューマンインタフェース研究会資料 120-8
ページ: 53-60
Proc., IEEE International Symposium on Multimedia
ページ: 185-192
ページ: 773
IPSJ Technical Report of SIG-CVIM
ページ: 152-18
IPSJ Technical Report of SIG-HI
ページ: 120-8
Proc, IEEE International Symposium on Multimedia
Proc., International Conference on Active Media Technology
Proc., IEEE International Symposium of Multimedia
ページ: 29-36
Proc., International Conference on Distributed Multimedia Systems
ページ: 196-200
