• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2017 年度 実績報告書

単機能の重ね合せにより新機能を創発するマルチファンクショナル深層学習ネットワーク

公募研究

研究領域人工知能と脳科学の対照と融合
研究課題/領域番号 17H06026
研究機関電気通信大学

研究代表者

柳井 啓司  電気通信大学, 大学院情報理工学研究科, 教授 (20301179)

研究期間 (年度) 2017-04-01 – 2019-03-31
キーワード深層学習 / 同時学習
研究実績の概要

1年目の2017年度は,画像を入力して画像を出力するEncoder-Decoderネットワークのマルチファンクション学習の研究としてスタイル変換と領域分割の組み合わせ,を発展させて,より多くの画像変換タスクを1つのネットワーク学習可能とすることを目指した.複数機能の重ね合わせと,処理の位置局所性を融合させ,プリミティブな機能要素を多数同時学習して,それらの機能と空間的な重み付けによって,様々な機能を実現する汎用的なCNN を実現できるか? について特に研究を行った.
研究の結果,異なるヘテロジーニアスな複数の機能の同時学習を条件付きネットワークで行うことは可能であることが確認できた.一方,機能の組み合わせに関しては,あらかじめ組み合わせた結果を学習しておくことで,期待する結果を得ることができた一方,単機能の学習をタスクごとの学習データで学習した場合には,テスト時に混ぜ合わた結果は必ずしも想定していたものが得られるわけではないことが分かった.
現在は,条件信号は単純に1つの層にのみ注入しているが,チャネル方向と空間方向アテンションをかける形で,多様な方法で信号を入力することによって,1つのネットワークに多様な振る舞いをさせることができるかどうか検証してきたいと考えている.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

1年目の2017年度は,画像を入力して画像を出力するEncoder-Decoderネットワークのマルチファンクション学習の研究としてスタイル変換と領域分割の組み合わせ,を発展させて,より多くの画像変換タスクを1つのネットワーク学習可能とすることを目指した.複数機能の重ね合わせと,処理の位置局所性を融合させ,プリミティブな機能要素を多数同時学習して,それらの機能と空間的な重み付けによって,様々な機能を実現する汎用的なCNN を実現できるか? について特に研究を行った

今後の研究の推進方策

1年目はタスクを2つに限定したが,2年目は多様なタスク,例えば,領域分割,奥行き推定,エッジ検出,超解像,coloring など,Encoder-Decoder ネットワークで学習可能な多様なタスクに関して補助入力付きの「CNNスイッチ」型Encoder-Decoder ネットワークで同時学習を行い,同時学習が可能か?複数重み付けでどのような結果が得られるか? について検証を行う.さら
に,プリミティブな機能要素を組み合わせることで,汎用的な機能が実現できるかどうかについて,どのようなプリミティブな機能を学習すればよいか,そしてそれらをどのように組み合わせ・重ね合わせればよいか検討を行う.最終的には,「CNNスイッチ」を利用した機能の重ね合わせに基づく機能創発が可能かどうか検証し,同時に脳科学者の協力も得て理論的な考察につい
ても行う.

  • 研究成果

    (14件)

すべて 2018 2017

すべて 雑誌論文 (3件) (うち査読あり 3件) 学会発表 (11件) (うち国際学会 11件)

  • [雑誌論文] Image-Based Food Calorie Estimation Using Recipe Information2018

    • 著者名/発表者名
      Takumi Ege and Keiji Yanai
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E101-D ページ: 1333-1341

    • DOI

      https://doi.org/10.1587/transinf.2017MVP0027

    • 査読あり
  • [雑誌論文] CNN 特徴量学習に基づく画像検索による食事画像カロリー量推定2018

    • 著者名/発表者名
      會下拓実, 柳井啓司
    • 雑誌名

      電子情報通信学会論文誌 D

      巻: 8 ページ: -

    • 査読あり
  • [雑誌論文] Neural Style Vectorを用いた絵画画像のスタイル検索2017

    • 著者名/発表者名
      松尾真, 柳井啓司
    • 雑誌名

      電子情報通信学会論文誌 D

      巻: 8 ページ: 742-749

    • 査読あり
  • [学会発表] AR DeepCalorieCam: An iOS App for Food Calorie Estimation with Augmented Reality2018

    • 著者名/発表者名
      Ryosuke Tanno and Keiji Yanai
    • 学会等名
      the International Multimedia Modeling Conference (MMM)
    • 国際学会
  • [学会発表] Predicting Segmentation Easiness from the Consistency for Weakly-Supervised Segmentation2017

    • 著者名/発表者名
      Wataru Shimoda and Keiji Yanai
    • 学会等名
      Asian Conference on Pattern Recognition (ACPR)
    • 国際学会
  • [学会発表] Estimating Food Calories for Multiple-dish Food Photos2017

    • 著者名/発表者名
      Takumi Ege and Keiji Yanai
    • 学会等名
      Asian Conference on Pattern Recognition (ACPR)
    • 国際学会
  • [学会発表] Image-Based Food Calorie Estimation Using Knowledge on Food Categories, Ingredients and Cooking Directions2017

    • 著者名/発表者名
      Takumi Ege and Keiji Yanai
    • 学会等名
      ACM Multimedia Thematic Workshops on Understanding
    • 国際学会
  • [学会発表] Comparison of Two Approaches for Direct Food Calorie Estimation2017

    • 著者名/発表者名
      Takumi Ege and Keiji Yanai
    • 学会等名
      International Workshop on Multimedia Assisted Dietary Management (MADIMA)
    • 国際学会
  • [学会発表] Partial Style Transfer Using Weakly-Supervised Semantic Segmentation2017

    • 著者名/発表者名
      Shin Matsuo, Wataru Shimoda and Keiji Yanai
    • 学会等名
      ICME Workshop on Multimedia Artworks Analysis (MMArt)
    • 国際学会
  • [学会発表] Conditional Fast Style Transfer Network2017

    • 著者名/発表者名
      Keiji Yanai and Ryosuke Tanno
    • 学会等名
      ACM International Conference on Multimedia Retrieval (ICMR)
    • 国際学会
  • [学会発表] Simultaneous Estimation of Food Categories and Calories with Multi-task CNN2017

    • 著者名/発表者名
      Takumi Ege and Keiji Yanai
    • 学会等名
      IAPR International Conference on Machine Vision Applications (MVA)
    • 国際学会
  • [学会発表] Unseen Style Transfer Based on a Conditional Fast Style Transfer Network, Proc. International Conference on Learning Representation Workshop Track (ICLR WS)2017

    • 著者名/発表者名
      Keiji Yanai
    • 学会等名
      2017
    • 国際学会
  • [学会発表] Twitter Photo Geo-Localization Using Both Textual and Visual Features2017

    • 著者名/発表者名
      Shin Matsuo, Wataru Shimoda and Keiji Yanai
    • 学会等名
      International Conference on Multimedia Big Data (BIGMM)
    • 国際学会
  • [学会発表] Learning Food Image Similarity for Food Image Retrieval2017

    • 著者名/発表者名
      Wataru Shimoda and Keiji Yanai
    • 学会等名
      International Conference on Multimedia Big Data (BIGMM)
    • 国際学会

URL: 

公開日: 2018-12-17  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi