• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Annual Research Report

確率的深層モデルによる人間らしい視覚属性認識

Research Project

Project/Area Number 16H05863
Research InstitutionTohoku University

Principal Investigator

山口 光太  東北大学, 情報科学研究科, 助教 (10742596)

Project Period (FY) 2016-04-01 – 2018-03-31
Keywordsコンピュータビジョン / 画像認識 / マルコフ確率場 / 深層学習 / 同時推定
Outline of Annual Research Achievements

本年度はモノではない視覚的な属性要素の画像認識モデルの構築を大きな目標に、以下の研究を行った。まず深層学習による画像認識モデルに既存の確率的モデルを取り入れるための確率伝搬手法を設計し、評価を行った。手法としては複数の属性要素間の相互依存性をモデル化する関数を深層学習モデルにより推論するという方針を取り入れ、GPUを用いて高速に演算を行えるように実装を進めた。視覚属性の実験評価用データセットとして学術研究用に公開されているSUN AttributesとCelebAデータセットを用いて推定性能の評価を行った結果、提案手法で比較手法に対して推定性能の向上が見られた。また相互依存性のモデルをどのように構築するべきかについて分析し、モデルの構造が計算速度と推論性能の関係から一般に使いやすいモデルの構築方針を見出すことができた。本研究の成果は国際会議に投稿している他、国内会議でも発表予定である。本年度は視覚属性にまつわる大規模データセットの構築についても取り組みを開始し、以前から継続していたECサイトでのデータ収集と分析に加え、新たにファッションコーディネートのソーシャル共有サイトからのデータ収集を開始し、服飾の組み合わせが視覚的にもたらす影響のモデリングも開始した。収集したデータからどの程度の予測が可能かを既存の深層学習モデルを基準手法として性能評価を取り行い、良好な結果が得られている。研究成果は国際会議に投稿予定である。

Research Progress Status

翌年度、交付申請を辞退するため、記入しない。

Strategy for Future Research Activity

翌年度、交付申請を辞退するため、記入しない。

  • Research Products

    (7 results)

All 2017 2016 Other

All Journal Article (4 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 3 results,  Acknowledgement Compliant: 1 results,  Open Access: 1 results) Presentation (2 results) (of which Int'l Joint Research: 1 results) Remarks (1 results)

  • [Journal Article] Attention to Describe Products with Attributes2017

    • Author(s)
      Shuohao Li, Kota Yamaguchi, Takayuki Okatani
    • Journal Title

      MVA 2017

      Volume: - Pages: -

    • Peer Reviewed / Int'l Joint Research / Acknowledgement Compliant
  • [Journal Article] Learning to Describe E-Commerce Images from Noisy Online Data2017

    • Author(s)
      Takuya Yashima, Naoaki Okazaki, Kentaro Inui, Kota Yamaguchi, Takayuki Okatani
    • Journal Title

      ACCV 2016

      Volume: 10115 Pages: 85-100

    • DOI

      10.1007/978-3-319-54193-8_6

    • Peer Reviewed
  • [Journal Article] Looking at Outfit to Parse Clothing2017

    • Author(s)
      Pongsate Tangseng, Zhipeng Wu, Kota Yamaguchi
    • Journal Title

      arXiv preprint

      Volume: - Pages: -

  • [Journal Article] Automatic Attribute Discovery with Neural Activations2016

    • Author(s)
      Sirion Vittayakorn, Takayuki Umeda, Kazuhiko Murasaki, Kyoko Sudo, Takayuki Okatani, Kota Yamaguchi
    • Journal Title

      ECCV 2016

      Volume: 9908 Pages: 252-268

    • DOI

      10.1007/978-3-319-46493-0_16

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] Recognizing Open-Vocabulary Relations between Objects in Images2016

    • Author(s)
      Masayasu Muraoka, Sumit Maharjan, Masaki Saito, Kota Yamaguchi, Naoaki Okazaki, Takayuki Okatani, Kentaro Inui
    • Organizer
      PACLIC30
    • Place of Presentation
      Seoul, Korea
    • Year and Date
      2016-10-28 – 2016-10-30
    • Int'l Joint Research
  • [Presentation] Learning to Describe Product Images from Noisy Online Data2016

    • Author(s)
      Takuya Yashima, Naoaki Okazaki, Kentaro Inui, Kota Yamaguchi, Takayuki Okatani
    • Organizer
      MIRU 2016
    • Place of Presentation
      アクトシティ浜松(浜松市)
    • Year and Date
      2016-08-01 – 2016-08-04
  • [Remarks] プロジェクトページ

    • URL

      http://vision.is.tohoku.ac.jp/~kyamagu/research/attribute-discovery/

URL: 

Published: 2018-01-16  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi