• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

未知の概念を含むクエリ文を用いた大規模映像からの詳細映像検索

研究課題

研究課題/領域番号 18K11362
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分61010:知覚情報処理関連
研究機関明星大学

研究代表者

植木 一也  明星大学, 情報学部, 准教授 (80580638)

研究期間 (年度) 2018-04-01 – 2022-03-31
研究課題ステータス 完了 (2021年度)
配分額 *注記
4,290千円 (直接経費: 3,300千円、間接経費: 990千円)
2020年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
2019年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
2018年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
キーワード映像検索 / クエリ文 / TRECVID / 未知の概念 / 画像/言語の同時埋め込み
研究成果の概要

インターネット上に日々アップロードされる多種多様な映像中から,新しく生まれるトレンドや新しい手口の犯罪等,新規の概念を含む未知のクエリ文に合致する映像を検索する技術に取り組んだ.大量の説明文付きの画像を用いて画像と言語の埋め込みを行い,学習されたモデルを動画フレームに対して適用する手法を検討した.作成したシステムを,米国国立標準技術研究所主催の国際競争型映像検索・評価ベンチマーク(TRECVID)に提出し,大規模映像を用いて評価を行ったところ,幅広いクエリ文に対して高精度で映像を検索できることが確認できた.

研究成果の学術的意義や社会的意義

ラベル付きの画像・映像データの整備と,ディープラーニング技術の進展に伴い,ある特定の物体・シーン・動作等のキーワードに合致した画像や映像の検索が実現されつつある.しかしながら,ライフスタイルの変化により,複数かつ新しい概念を含んだクエリ文を用いた詳細映像検索の実現が期待されている.本研究成果により,幅広く複雑なクエリ文に対して高精度に映像を検索することが可能であることから,新しく生まれる未知の概念が含まれている場合においても,その説明文をクエリとして入力することで,必要となる映像を即座に検索できることが期待される.

報告書

(5件)
  • 2021 実績報告書   研究成果報告書 ( PDF )
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 2018 実施状況報告書
  • 研究成果

    (19件)

すべて 2021 2020 2019 2018

すべて 雑誌論文 (1件) (うち査読あり 1件) 学会発表 (18件) (うち国際学会 5件)

  • [雑誌論文] 複雑のコンセプトを含むクエリ文からのゼロショット映像検索 - TRECVID AVS タスクにおける成果と課題 -2018

    • 著者名/発表者名
      植木 一也,平川 幸司,菊池 康太郎,小林 哲則
    • 雑誌名

      精密工学会誌

      巻: 84 ページ: 983-990

    • NAID

      130007534741

    • 関連する報告書
      2018 実施状況報告書
    • 査読あり
  • [学会発表] ゼロショット画像検索のための画像と言語の対応付け手法 --サーベイ--2021

    • 著者名/発表者名
      植木 一也
    • 学会等名
      第27回画像センシングシンポジウム(SSII2021)
    • 関連する報告書
      2021 実績報告書
  • [学会発表] TRECVID映像検索ベンチマーク:AVSタスクへの6年間の挑戦と技術の進歩2021

    • 著者名/発表者名
      植木 一也
    • 学会等名
      ビジョン技術の実利用ワークショップ(ViEW2021)
    • 関連する報告書
      2021 実績報告書
  • [学会発表] Waseda_Meisei_SoftBank at TRECVID 2021: Ad-hoc Video Search2021

    • 著者名/発表者名
      Kazuya Ueki, Takayuki Hori, Yongbeom Kim, Yuma Suzuki
    • 学会等名
      Notebook paper of the TRECVID 2021 Workshop
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Survey of Visual-Semantic Embedding Methods for Zero-Shot Image Retrieval2021

    • 著者名/発表者名
      Kazuya Ueki
    • 学会等名
      Proceedings of International Conference on Machine Learning and Applications (ICMLA)
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] 服装の色を用いた人物検索に向けた学習済みモデルの活用2021

    • 著者名/発表者名
      セイエドネシャド ロスタム,武藤 良,植木 一也,堀 隆之,金 容範,鈴木 裕真
    • 学会等名
      動的画像処理実用化ワークショップ (DIA2021)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 少数画像をもとにした顔属性データセットの拡張2021

    • 著者名/発表者名
      山本 啓斗,武藤 良,植木 一也,堀 隆之,金 容範,鈴木 裕真
    • 学会等名
      動的画像処理実用化ワークショップ (DIA2021)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Waseda_Meisei_SoftBank at TRECVID 2020: Ad-hoc Video Search2020

    • 著者名/発表者名
      Kazuya Ueki, Ryo Mutou, Takayuki Hori, Yongbeom Kim, Yuma Suzuki
    • 学会等名
      Notebook paper of the TRECVID 2020 Workshop
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 学習済みモデルを用いた大規模映像データにおける特定の色の着衣をつけた人物の検索2020

    • 著者名/発表者名
      武藤 良,セイエドネシャド ロスタム,植木 一也,堀 隆之,金 容範,鈴木 裕真
    • 学会等名
      ビジョン技術の実利用ワークショップ(ViEW2020)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] OpenPoseを用いた特定の色の服を着た人物の検出2020

    • 著者名/発表者名
      セイエドネシャド ロスタム,武藤 良,植木 一也
    • 学会等名
      第26回画像センシングシンポジウム(SSII2020)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Comparison and Evaluation of Video Retrieval Approaches Using Query Sentences2020

    • 著者名/発表者名
      Kazuya Ueki, Takayuki Hori
    • 学会等名
      the 3rd International Conference on Machine Vision and Applications (ICMVA 2020)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Waseda_Meisei_Meisei at TRECVID 2019: Ad-hoc Video Search2019

    • 著者名/発表者名
      Kazuya Ueki, Takayuki Hori, and Tetsunori Kobayashi
    • 学会等名
      the TRECVID 2019 Workshop
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Zero-shot Video Retrieval using a Large-scale Video Database2019

    • 著者名/発表者名
      Kazuya Ueki and Takayuki Hori
    • 学会等名
      the International Conference on Computer Vision (ICCV2019) MDALC Workshop
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] クエリ文を用いた映像検索手法の比較検証2019

    • 著者名/発表者名
      植木 一也, 堀 隆之, 小林 哲則
    • 学会等名
      第22回 画像の認識・理解シンポジウム (MIRU2019)
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] クエリ文によるゼロショット映像検索 - TRECVID 2018 AVSタスクの成果報告 -2019

    • 著者名/発表者名
      植木 一也,中込 優,平川 幸司,菊池 康太郎,林 良彦,小川 哲司,小林 哲則
    • 学会等名
      動的画像処理実用化ワークショップ(DIA2019)
    • 関連する報告書
      2018 実施状況報告書
  • [学会発表] ゼロショット映像検索のための潜在的なコンセプトの抽出2018

    • 著者名/発表者名
      植木 一也
    • 学会等名
      画像の認識・理解シンポジウム (MIRU2018)
    • 関連する報告書
      2018 実施状況報告書
  • [学会発表] Fine-grained Video Retrieval using Query Phrases - Waseda_Meisei TRECVID 2017 AVS System -2018

    • 著者名/発表者名
      Kazuya Ueki, Koji Hirakawa, Kotaro Kikuchi, and Tetsunori Kobayash
    • 学会等名
      International Conference on Pattern Recognition (ICPR2018)
    • 関連する報告書
      2018 実施状況報告書
  • [学会発表] Waseda_Meisei at TRECVID 2018: Fully-automatic Ad-hoc Video Search2018

    • 著者名/発表者名
      Kazuya Ueki, Yu Nakagome, Koji Hirakawa, Kotaro Kikuchi, Yoshihiko Hayashi, Tetsuji Ogawa, Tetsunori Kobayashi
    • 学会等名
      TRECVID 2018 Workshop
    • 関連する報告書
      2018 実施状況報告書
  • [学会発表] Latent Concept Extraction for Zero-shot Video Retrieval2018

    • 著者名/発表者名
      Kazuya Ueki
    • 学会等名
      Image and Vision Computing New Zealand (IVCNZ2018)
    • 関連する報告書
      2018 実施状況報告書

URL: 

公開日: 2018-04-23   更新日: 2023-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi