• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Research-status Report

多種センサとクラウドを活用した分散リアルタイム機械学習処理基盤

Research Project

Project/Area Number 16K00177
Research InstitutionNational Institute of Informatics

Principal Investigator

竹房 あつ子  国立情報学研究所, アーキテクチャ科学研究系, 准教授 (70345411)

Co-Investigator(Kenkyū-buntansha) 高野 了成  国立研究開発法人産業技術総合研究所, 情報技術研究部門, 主任研究員 (10509516)
小口 正人  お茶の水女子大学, 基幹研究院, 教授 (60328036)
中田 秀基  国立研究開発法人産業技術総合研究所, 人工知能研究センター, 主任研究員 (80357631)
Project Period (FY) 2016-04-01 – 2019-03-31
Keywordsクラウドコンピューティング / 分散処理 / ディープラーニング / 機械学習 / 資源管理
Outline of Annual Research Achievements

本研究は,大量のセンサデータに対し、センサ群およびクラウドの計算資源を有効活用して高精度な解析を即時に行う分散リアルタイム機械学習処理基盤を開発することを目的としている。
多種センサを配備し、それらから収集された情報をクラウドに集約して解析することが可能になってきた。一方、カメラの動画像はデータ量が膨大なためクラウドへの集約は難しく、その解析処理に必要な計算量も多いため、リアルタイムに高精度な解析を行うのは非常に困難である。よって、センサとクラウドの計算資源を活用した分散環境でディープラーニングによる高精度な機械学習処理を実現する。これにより、動画像と他のセンサデータを利用した高精度なリアルタイム解析を容易にし、様々な次世代サービスアプリケーションの創出に寄与する。
H28年度は、機械学習フレームワークの1つであるCaffeを拡張し、センサ側の計算機とクラウド側の計算機でパイプライン的に分散画像解析処理を行う手法を提案した。学習処理の分散方法、センサ側計算機の性能、センサとクラウド間のネットワーク帯域を変化させた評価を行い、学習精度をあまり落とすことなく分散処理による処理時間の短縮が可能であることを示した。また、分散メッセージングシステムであるApache Kafkaと大規模分散処理フレームワークのApache Sparkを用い、センサデータのための分散リアルタイム処理基盤のプロトタイプ実装を行った。
本研究の成果は、ACM HPDC 2016およびIEEE Big Data 2016でポスター発表するとともに、査読付き国際会議ACM IMCOM 2017で口頭発表を行った。また、国内の研究会等で5件の発表を行った。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

多種センサとクラウドを活用した高効率・高精度な分散リアルタイム機械学習処理基盤の構築を目指し、(1)センサ・クラウドを活用した分散処理基盤の構築、(2)高効率な分散リアルタイム処理を実現する資源管理機構、(3)ディープラーニングを用いた高精度分散動画像解析の3つの研究開発を行う。
H28年度は、各課題の概念設計を行うとともに、プロトタイプ実装を進めた。
概念設計のため、センサとクラウドを利用した機械学習処理における学習精度と性能特性の調査を行った。機械学習フレームワークの1つであるCaffeを拡張し、センサ側の計算機とクラウド側の計算機でパイプライン的に分散画像解析処理を行う手法を開発し、学習処理の分散方法、センサ側計算機の性能、センサとクラウド間のネットワーク帯域を変化させた評価を行った。実験から、現実的なセンサとクラウド間のネットワーク帯域下では、学習精度をあまり落とすことなく分散処理による処理時間の短縮が可能であることを示した。
また,分散メッセージングシステムであるApache Kafkaと大規模分散処理フレームワークのApache Sparkを用い、複数センサデータを扱う分散リアルタイム処理基盤のプロトタイプ実装を行った。Apache Kafkaにより複数センサ端末で構成されるセンサネットワークを構築するとともに、Apache Sparkによりクラウド側の計算環境を構築し、分散処理を可能にした。プロトタイプ上でディープラーニング用ライブラリChainerを用いた画像解析処理を行った結果、性能向上の余地があることがわかった。

Strategy for Future Research Activity

多種センサとクラウドを活用した高効率・高精度な分散リアルタイム機械学習処理基盤の構築のため、H29年度は分散リアルタイム機械学習処理基盤を完成させる。
(1)センサ・クラウドを活用した分散処理基盤の構築では、初年度に引き続き分散リアルタイム処理基盤の開発を進め、分散処理基盤上で様々な条件下での性能評価を行うとともに、評価指標を検討していく。
(2)高効率な分散リアルタイム処理を実現する資源管理機構の開発では、分散リアルタイム処理基盤のプロトタイプを用いたディープラーニング処理をクラウド環境で実行し、資源管理機構の最適化を図る。(3)ディープラーニングを用いた高精度分散動画像解析では、学習の精度、処理速度の双方の最適化を図っていく。
(1)、(2)、(3)の研究課題について、国内外の会議へ投稿するとともに、国際会議でポスター発表や展示発表を行う。
H30年度は、構築した処理基盤の最適化と機械学習の高精度化を進めるとともに、評価シミュレータを開発して実環境およびシミュレーション環境で有効性を実証する予定である。

Causes of Carryover

成果発表のための学会参加費、旅費に必要となるため、繰越し手続きを行った。

Expenditure Plan for Carryover Budget

2017年12月に開催されるIEEE BigData 2017で研究成果発表を行うための旅費として使用する。

  • Research Products

    (15 results)

All 2017 2016

All Journal Article (7 results) (of which Peer Reviewed: 1 results,  Acknowledgement Compliant: 7 results,  Open Access: 2 results) Presentation (8 results) (of which Int'l Joint Research: 3 results)

  • [Journal Article] Pipeline-Based Processing of the Deep Learning Framework Caffe2017

    • Author(s)
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • Journal Title

      Proc. ACM IMCOM 2017

      Volume: 97 Pages: 1-8

    • DOI

      10.1145/3022227.3022323

    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] 大規模データ分散処理プラットフォームApache Sparkを用いた分散並列機械学習の検討2017

    • Author(s)
      加藤香澄,竹房あつ子,中田秀基,小口正人
    • Journal Title

      情報処理学会第79回全国大会論文集

      Volume: 3S-09 Pages: 1-2

    • Acknowledgement Compliant
  • [Journal Article] 大規模データ処理フレームワークのストリーミング機能を利用した機械学習処理の検討2017

    • Author(s)
      一瀬絢衣,竹房あつ子,中田秀基,小口正人
    • Journal Title

      情報処理学会第79回全国大会論文集

      Volume: 3S-08 Pages: 1-2

    • Acknowledgement Compliant
  • [Journal Article] 大規模データ分散処理プラットフォームApache Sparkを用いた分散並列機械学習に関する考察2017

    • Author(s)
      加藤 香澄,竹房 あつ子,中田 秀基,小口 正人
    • Journal Title

      DEIM Forum 2017論文集

      Volume: H4-3 Pages: 1-6

    • Open Access / Acknowledgement Compliant
  • [Journal Article] 大規模データ処理フレームワークのストリーミング機能を利用した機械学習処理の評価2017

    • Author(s)
      一瀬 絢衣,竹房 あつ子,中田 秀基,小口 正人
    • Journal Title

      DEIM Forum 2017論文集

      Volume: B3-2 Pages: 1-5

    • Open Access / Acknowledgement Compliant
  • [Journal Article] Evaluation of Distributed Processing Evaluation Distributed Processing of Caffe Framework Using Poor Performance Device2016

    • Author(s)
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • Journal Title

      Proc. IEEE BigData 2016 (Poster)

      Volume: - Pages: 3980-3982

    • DOI

      10.1109/BigData.2016.7841082

    • Acknowledgement Compliant
  • [Journal Article] ディープラーニングフレームワークCaffeの分散処理の評価2016

    • Author(s)
      一瀬 絢衣, 竹房 あつ子, 中田 秀基, 小口 正人
    • Journal Title

      DICOMO2016論文集

      Volume: 8A-4 Pages: 1-5

    • Acknowledgement Compliant
  • [Presentation] 大規模データ分散処理プラットフォームApache Sparkを用いた分散並列機械学習の検討2017

    • Author(s)
      加藤香澄,竹房あつ子,中田秀基,小口正人
    • Organizer
      情報処理学会第79回全国大会
    • Place of Presentation
      名古屋市、愛知県
    • Year and Date
      2017-03-17
  • [Presentation] 大規模データ処理フレームワークのストリーミング機能を利用した機械学習処理の検討2017

    • Author(s)
      一瀬絢衣,竹房あつ子,中田秀基,小口正人
    • Organizer
      情報処理学会第79回全国大会
    • Place of Presentation
      名古屋市、愛知県
    • Year and Date
      2017-03-17
  • [Presentation] 大規模データ分散処理プラットフォームApache Sparkを用いた分散並列機械学習に関する考察2017

    • Author(s)
      加藤 香澄,竹房 あつ子,中田 秀基,小口 正人
    • Organizer
      DEIM Forum 2017
    • Place of Presentation
      高山市、岐阜県
    • Year and Date
      2017-03-07
  • [Presentation] 大規模データ処理フレームワークのストリーミング機能を利用した機械学習処理の評価2017

    • Author(s)
      一瀬 絢衣,竹房 あつ子,中田 秀基,小口 正人
    • Organizer
      DEIM Forum 2017
    • Place of Presentation
      高山市、岐阜県
    • Year and Date
      2017-03-07
  • [Presentation] Pipeline-Based Processing of the Deep Learning Framework Caffe2017

    • Author(s)
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • Organizer
      ACM IMCOM 2017
    • Place of Presentation
      Beppu, Japan
    • Year and Date
      2017-01-06
    • Int'l Joint Research
  • [Presentation] Evaluation of Distributed Processing Evaluation Distributed Processing of Caffe Framework Using Poor Performance Device2016

    • Author(s)
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • Organizer
      IEEE BigData 2016 (Poster)
    • Place of Presentation
      Washington D.C., USA
    • Year and Date
      2016-12-06
    • Int'l Joint Research
  • [Presentation] ディープラーニングフレームワークCaffeの分散処理の評価2016

    • Author(s)
      一瀬 絢衣, 竹房 あつ子, 中田 秀基, 小口 正人
    • Organizer
      DICOMO2016
    • Place of Presentation
      鳥羽市、三重県
    • Year and Date
      2016-07-06
  • [Presentation] Evaluation of Distributed Processing of the Deep Learning Framework Caffe2016

    • Author(s)
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • Organizer
      ACM HPDC 2016 (Poster)
    • Place of Presentation
      Kyoto, Japan
    • Year and Date
      2016-06-02
    • Int'l Joint Research

URL: 

Published: 2018-01-16  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi