画像情報と言語情報の統合化による画像データベース検索システム

1993 Fiscal Year Annual Research Report

• Project/Area Number: 05402062
• Research Institution: Kyoto University
• Principal Investigator: 長尾 真 京都大学, 工学部, 教授 (30025960)
• Keywords: 画像データベース / 画像検索 / 画像の構造記述 / 画像の自然言語記述 / 対話的画像処理

Research Abstract

研究は画像を中心とした研究と言語記述を中心とした研究との両方から行っている。その統合は最終年次に行う予定である。
(1)画像検索のための1つの要素は画像がどのようなものであるかを明らかにすることである。我々はこれを対話的に作成するソフトウェアシステムを作った。先ず、画像をディスプレイに表示し、その任意の部分をカーソルで領域指定すると、その領域の位置、面積、色、画質などが自動的に解析される。人はこの領域に対して適切な名称を与える。これを画像の任意の場所に対して自己埋め込み的にすることを許すことによって、画像の構造と特徴が任意の精度で木構造とその各ノードに付与された豊富な画質情報の形で得られる。
(2)画像検索には人間の持つ主観や印象をどのように扱うべきかという問題がある。画像データからこれらの情報を直接抽出することは困難なので、絵画に付属する解説文を対象に自然言語処理を行ない、対象情報および感性的情報を抽出する方法を提案した。解説文に記述されている情報を分類し、それを抽出するための意味解析の方法とそれに必要な体言と用言の意味辞書と格フレーム情報を明かにした。さらに約50文の絵画の説明文について実験を行い、本方法の有効性を示した。

Research Products

• [Publications] 渡辺 靖彦他: "絵画解説文の対象情報・感性的情報の抽出" 情報処理学会人文科学とコンピュータ研究会資料. 20-2. 13-20 (1993)
• [Publications] Hussain S.Shakir,et al.: "Dynamic Token-based Sketch Query Construction in Image Database Systems" 情報処理学会人文科学とコンピュ-タ研究会資料. 1-8 (1994)
• [Publications] Hussain S.Shakir,et al.: "Transducer-based Knowledge Capture and Adaptive Hierarchical Entity Modeling of Image Contour Information" 計測自動制御学会第19回知能システムシンポジウム. 1-8 (1994)
• [Publications] Hussain S.Shakir,et al.: "Future Relaxation in Context-based Image Retrieval" 情報処理学会オーディオビジュアル複合情報処理研究会資料. 1-6 (1994)