• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

集合知を用いた質感認知と物体認知の関係に関する大規模分析

Publicly Offered Research

Project AreaIntegrative studies of neural mechanisms and advanced information technologies for perception of material and surface qualities
Project/Area Number 25135714
Research Category

Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area)

Allocation TypeSingle-year Grants
Review Section Complex systems
Research InstitutionThe University of Electro-Communications

Principal Investigator

柳井 啓司  電気通信大学, 情報理工学(系)研究科, 准教授 (20301179)

Project Period (FY) 2013-04-01 – 2015-03-31
Project Status Completed (Fiscal Year 2014)
Budget Amount *help
¥9,880,000 (Direct Cost: ¥7,600,000、Indirect Cost: ¥2,280,000)
Fiscal Year 2014: ¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
Fiscal Year 2013: ¥5,330,000 (Direct Cost: ¥4,100,000、Indirect Cost: ¥1,230,000)
KeywordsWeb画像マイニング / 質感分析 / 集合知 / DCNN特徴 / ジオタグ画像
Outline of Annual Research Achievements

本年度は「集合知を用いた質感認知と物体認知の関係に関する大規模分析」の2年目で最終年度であった.初年度の昨年度は,Web上の大量の「単語付き画像」を利用して,(1)様々な画像特徴量を用いて,画像認識によって認識可能な質感表現を自動的に検出することを行い,並行して大容量ファイルサーバと高速計算機クラスタを導入し,大規模実験のための環境整備も実施した.本年度は昨年度の研究を踏まえて,(1)質感Web画像収集システムの実現,(2)Web収集画像を用いた質感語の視覚性評価実験,(3)画像中の質感領域の推定,を行った.
(1) 質感Web画像収集システムでは,様々な質感語について,関連キーワードを入力するだけで自動的にWebから画像を収集し,さらに画像認識手法によってノイズ画像を自動的に除去することによって,画像データセットを自動構築するWebシステムを構築した.
(2) Web収集画像を用いた質感語の視覚性評価実験では,(1)のシステムを利用し,122種類の主にオノマトペによる質感表現に対応する画像データを収集し,その「画像認識可能性」の評価を行った.オノマトペとは,擬音語のことで直感的に物体や素材の様子を表現する言葉である.例えば,「ざらざら」「ごちゃごちゃ」などがあるが,それらのうち見た目に関係して単語は一部である.ここでの研究では,Web画像マイニングと画像認識手法を用いて,どのオノマトペが画像の見た目を表す表現で,どのオノマトペが画像に無関係か区別することを行った.質感画像の認識では,Deep Convolutional Neural Network(DCNN)特徴が有効であることが示された.
(3) 画像中の質感領域の推定では,(2)では画像全体の認識可能性について評価を行ったが,次の段階として特定の質感に対応する部分を推定する実験を行った.

Research Progress Status

26年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

26年度が最終年度であるため、記入しない。

Report

(2 results)
  • 2014 Annual Research Report
  • 2013 Annual Research Report
  • Research Products

    (10 results)

All 2015 2014 Other

All Journal Article (4 results) (of which Peer Reviewed: 4 results) Presentation (6 results)

  • [Journal Article] Event Photo Mining from Twitter Using Keyword Bursts and Image Clustering2015

    • Author(s)
      Takamu Kaneko and Keiji Yanai
    • Journal Title

      Neurocomputing

      Volume: - Pages: 143-158

    • DOI

      10.1016/j.neucom.2015.02.081

    • Related Report
      2014 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Automatic Extraction of Relevant Video Shots of Specific Actions Exploiting Web Data2014

    • Author(s)
      Do Hang Nga and Keiji Yanai
    • Journal Title

      Computer Vision and Image Understanding

      Volume: Vol. 118 Pages: 2-15

    • DOI

      10.1016/j.cviu.2013.03.009

    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 道案内動画の作成のためのウェアラブルカメラ映像の自動要約2014

    • Author(s)
      岡本昌也,柳井啓司
    • Journal Title

      電子情報通信学会 論文誌D

      Volume: J97-D, No.8

    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Journal Article] FoodCam: A Real-time Food Recognition System on a Smartphone2014

    • Author(s)
      Yoshiyuki Kawano and Keiji Yanai
    • Journal Title

      Multimedia Tools and Applications

      Volume: - Issue: 14 Pages: 5263-5287

    • DOI

      10.1007/s11042-014-2000-8

    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Presentation] A Visual Analysis on Recognizability and Discriminability of Onomatopoeia Words with DCNN Features2015

    • Author(s)
      Wataru Shimoda and Keiji Yanai
    • Organizer
      IEEE International Conference on Multimedia and Expo (ICME)
    • Place of Presentation
      Torino, Italy
    • Year and Date
      2015-06-29 – 2015-07-03
    • Related Report
      2014 Annual Research Report
  • [Presentation] An Analysis on Visual Recognizability of Onomatopoeia Using Web Images and DCNN features2014

    • Author(s)
      Wataru Shimoda and Keiji Yanai
    • Organizer
      Proc. of PCM Workshop on Multimedia Big Data Analytics (MBDA)
    • Place of Presentation
      Kuching, Malaysia
    • Year and Date
      2014-12-01
    • Related Report
      2014 Annual Research Report
  • [Presentation] Food Image Recognition with Deep Convolutional Features2014

    • Author(s)
      Yoshiyuki Kawano and Keiji Yanai
    • Organizer
      ACM UbiComp Workshop on Smart Technology for Cooking and Eating Activities (CEA)
    • Place of Presentation
      Seattle, USA
    • Year and Date
      2014-09-14
    • Related Report
      2014 Annual Research Report
  • [Presentation] Twitter Visual Event Mining System

    • Author(s)
      Takamu Kaneko, Hiroyoshi Harada, Keiji Yanai
    • Organizer
      Proc. of International Conference on Multimedia and Expo
    • Place of Presentation
      San Jone, CA, USA
    • Related Report
      2013 Annual Research Report
  • [Presentation] A Spatio-Temporal Feature based on Triangulation of Dense SURF

    • Author(s)
      Do Hang Nga and Keiji Yanai
    • Organizer
      ICCV Workshop on Action Recognition with a Large Number of Classes
    • Place of Presentation
      Sydney, Australia
    • Related Report
      2013 Annual Research Report
  • [Presentation] Large-scale Web Video Shot Ranking Based on Visual Features and Tag Co-occurrence

    • Author(s)
      Do Hang Nga and Keiji Yanai
    • Organizer
      ACM Multimedia
    • Place of Presentation
      Barcelona, Spain
    • Related Report
      2013 Annual Research Report

URL: 

Published: 2013-05-15   Modified: 2019-07-29  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi