• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2016 年度 実施状況報告書

多種センサとクラウドを活用した分散リアルタイム機械学習処理基盤

研究課題

研究課題/領域番号 16K00177
研究機関国立情報学研究所

研究代表者

竹房 あつ子  国立情報学研究所, アーキテクチャ科学研究系, 准教授 (70345411)

研究分担者 高野 了成  国立研究開発法人産業技術総合研究所, 情報技術研究部門, 主任研究員 (10509516)
小口 正人  お茶の水女子大学, 基幹研究院, 教授 (60328036)
中田 秀基  国立研究開発法人産業技術総合研究所, 人工知能研究センター, 主任研究員 (80357631)
研究期間 (年度) 2016-04-01 – 2019-03-31
キーワードクラウドコンピューティング / 分散処理 / ディープラーニング / 機械学習 / 資源管理
研究実績の概要

本研究は,大量のセンサデータに対し、センサ群およびクラウドの計算資源を有効活用して高精度な解析を即時に行う分散リアルタイム機械学習処理基盤を開発することを目的としている。
多種センサを配備し、それらから収集された情報をクラウドに集約して解析することが可能になってきた。一方、カメラの動画像はデータ量が膨大なためクラウドへの集約は難しく、その解析処理に必要な計算量も多いため、リアルタイムに高精度な解析を行うのは非常に困難である。よって、センサとクラウドの計算資源を活用した分散環境でディープラーニングによる高精度な機械学習処理を実現する。これにより、動画像と他のセンサデータを利用した高精度なリアルタイム解析を容易にし、様々な次世代サービスアプリケーションの創出に寄与する。
H28年度は、機械学習フレームワークの1つであるCaffeを拡張し、センサ側の計算機とクラウド側の計算機でパイプライン的に分散画像解析処理を行う手法を提案した。学習処理の分散方法、センサ側計算機の性能、センサとクラウド間のネットワーク帯域を変化させた評価を行い、学習精度をあまり落とすことなく分散処理による処理時間の短縮が可能であることを示した。また、分散メッセージングシステムであるApache Kafkaと大規模分散処理フレームワークのApache Sparkを用い、センサデータのための分散リアルタイム処理基盤のプロトタイプ実装を行った。
本研究の成果は、ACM HPDC 2016およびIEEE Big Data 2016でポスター発表するとともに、査読付き国際会議ACM IMCOM 2017で口頭発表を行った。また、国内の研究会等で5件の発表を行った。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

多種センサとクラウドを活用した高効率・高精度な分散リアルタイム機械学習処理基盤の構築を目指し、(1)センサ・クラウドを活用した分散処理基盤の構築、(2)高効率な分散リアルタイム処理を実現する資源管理機構、(3)ディープラーニングを用いた高精度分散動画像解析の3つの研究開発を行う。
H28年度は、各課題の概念設計を行うとともに、プロトタイプ実装を進めた。
概念設計のため、センサとクラウドを利用した機械学習処理における学習精度と性能特性の調査を行った。機械学習フレームワークの1つであるCaffeを拡張し、センサ側の計算機とクラウド側の計算機でパイプライン的に分散画像解析処理を行う手法を開発し、学習処理の分散方法、センサ側計算機の性能、センサとクラウド間のネットワーク帯域を変化させた評価を行った。実験から、現実的なセンサとクラウド間のネットワーク帯域下では、学習精度をあまり落とすことなく分散処理による処理時間の短縮が可能であることを示した。
また,分散メッセージングシステムであるApache Kafkaと大規模分散処理フレームワークのApache Sparkを用い、複数センサデータを扱う分散リアルタイム処理基盤のプロトタイプ実装を行った。Apache Kafkaにより複数センサ端末で構成されるセンサネットワークを構築するとともに、Apache Sparkによりクラウド側の計算環境を構築し、分散処理を可能にした。プロトタイプ上でディープラーニング用ライブラリChainerを用いた画像解析処理を行った結果、性能向上の余地があることがわかった。

今後の研究の推進方策

多種センサとクラウドを活用した高効率・高精度な分散リアルタイム機械学習処理基盤の構築のため、H29年度は分散リアルタイム機械学習処理基盤を完成させる。
(1)センサ・クラウドを活用した分散処理基盤の構築では、初年度に引き続き分散リアルタイム処理基盤の開発を進め、分散処理基盤上で様々な条件下での性能評価を行うとともに、評価指標を検討していく。
(2)高効率な分散リアルタイム処理を実現する資源管理機構の開発では、分散リアルタイム処理基盤のプロトタイプを用いたディープラーニング処理をクラウド環境で実行し、資源管理機構の最適化を図る。(3)ディープラーニングを用いた高精度分散動画像解析では、学習の精度、処理速度の双方の最適化を図っていく。
(1)、(2)、(3)の研究課題について、国内外の会議へ投稿するとともに、国際会議でポスター発表や展示発表を行う。
H30年度は、構築した処理基盤の最適化と機械学習の高精度化を進めるとともに、評価シミュレータを開発して実環境およびシミュレーション環境で有効性を実証する予定である。

次年度使用額が生じた理由

成果発表のための学会参加費、旅費に必要となるため、繰越し手続きを行った。

次年度使用額の使用計画

2017年12月に開催されるIEEE BigData 2017で研究成果発表を行うための旅費として使用する。

  • 研究成果

    (15件)

すべて 2017 2016

すべて 雑誌論文 (7件) (うち査読あり 1件、 謝辞記載あり 7件、 オープンアクセス 2件) 学会発表 (8件) (うち国際学会 3件)

  • [雑誌論文] Pipeline-Based Processing of the Deep Learning Framework Caffe2017

    • 著者名/発表者名
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • 雑誌名

      Proc. ACM IMCOM 2017

      巻: 97 ページ: 1-8

    • DOI

      10.1145/3022227.3022323

    • 査読あり / 謝辞記載あり
  • [雑誌論文] 大規模データ分散処理プラットフォームApache Sparkを用いた分散並列機械学習の検討2017

    • 著者名/発表者名
      加藤香澄,竹房あつ子,中田秀基,小口正人
    • 雑誌名

      情報処理学会第79回全国大会論文集

      巻: 3S-09 ページ: 1-2

    • 謝辞記載あり
  • [雑誌論文] 大規模データ処理フレームワークのストリーミング機能を利用した機械学習処理の検討2017

    • 著者名/発表者名
      一瀬絢衣,竹房あつ子,中田秀基,小口正人
    • 雑誌名

      情報処理学会第79回全国大会論文集

      巻: 3S-08 ページ: 1-2

    • 謝辞記載あり
  • [雑誌論文] 大規模データ分散処理プラットフォームApache Sparkを用いた分散並列機械学習に関する考察2017

    • 著者名/発表者名
      加藤 香澄,竹房 あつ子,中田 秀基,小口 正人
    • 雑誌名

      DEIM Forum 2017論文集

      巻: H4-3 ページ: 1-6

    • オープンアクセス / 謝辞記載あり
  • [雑誌論文] 大規模データ処理フレームワークのストリーミング機能を利用した機械学習処理の評価2017

    • 著者名/発表者名
      一瀬 絢衣,竹房 あつ子,中田 秀基,小口 正人
    • 雑誌名

      DEIM Forum 2017論文集

      巻: B3-2 ページ: 1-5

    • オープンアクセス / 謝辞記載あり
  • [雑誌論文] Evaluation of Distributed Processing Evaluation Distributed Processing of Caffe Framework Using Poor Performance Device2016

    • 著者名/発表者名
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • 雑誌名

      Proc. IEEE BigData 2016 (Poster)

      巻: - ページ: 3980-3982

    • DOI

      10.1109/BigData.2016.7841082

    • 謝辞記載あり
  • [雑誌論文] ディープラーニングフレームワークCaffeの分散処理の評価2016

    • 著者名/発表者名
      一瀬 絢衣, 竹房 あつ子, 中田 秀基, 小口 正人
    • 雑誌名

      DICOMO2016論文集

      巻: 8A-4 ページ: 1-5

    • 謝辞記載あり
  • [学会発表] 大規模データ分散処理プラットフォームApache Sparkを用いた分散並列機械学習の検討2017

    • 著者名/発表者名
      加藤香澄,竹房あつ子,中田秀基,小口正人
    • 学会等名
      情報処理学会第79回全国大会
    • 発表場所
      名古屋市、愛知県
    • 年月日
      2017-03-17
  • [学会発表] 大規模データ処理フレームワークのストリーミング機能を利用した機械学習処理の検討2017

    • 著者名/発表者名
      一瀬絢衣,竹房あつ子,中田秀基,小口正人
    • 学会等名
      情報処理学会第79回全国大会
    • 発表場所
      名古屋市、愛知県
    • 年月日
      2017-03-17
  • [学会発表] 大規模データ分散処理プラットフォームApache Sparkを用いた分散並列機械学習に関する考察2017

    • 著者名/発表者名
      加藤 香澄,竹房 あつ子,中田 秀基,小口 正人
    • 学会等名
      DEIM Forum 2017
    • 発表場所
      高山市、岐阜県
    • 年月日
      2017-03-07
  • [学会発表] 大規模データ処理フレームワークのストリーミング機能を利用した機械学習処理の評価2017

    • 著者名/発表者名
      一瀬 絢衣,竹房 あつ子,中田 秀基,小口 正人
    • 学会等名
      DEIM Forum 2017
    • 発表場所
      高山市、岐阜県
    • 年月日
      2017-03-07
  • [学会発表] Pipeline-Based Processing of the Deep Learning Framework Caffe2017

    • 著者名/発表者名
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • 学会等名
      ACM IMCOM 2017
    • 発表場所
      Beppu, Japan
    • 年月日
      2017-01-06
    • 国際学会
  • [学会発表] Evaluation of Distributed Processing Evaluation Distributed Processing of Caffe Framework Using Poor Performance Device2016

    • 著者名/発表者名
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • 学会等名
      IEEE BigData 2016 (Poster)
    • 発表場所
      Washington D.C., USA
    • 年月日
      2016-12-06
    • 国際学会
  • [学会発表] ディープラーニングフレームワークCaffeの分散処理の評価2016

    • 著者名/発表者名
      一瀬 絢衣, 竹房 あつ子, 中田 秀基, 小口 正人
    • 学会等名
      DICOMO2016
    • 発表場所
      鳥羽市、三重県
    • 年月日
      2016-07-06
  • [学会発表] Evaluation of Distributed Processing of the Deep Learning Framework Caffe2016

    • 著者名/発表者名
      Ayae Ichinose, Atsuko Takefusa, Hidemoto Nakada, Masato Oguchi
    • 学会等名
      ACM HPDC 2016 (Poster)
    • 発表場所
      Kyoto, Japan
    • 年月日
      2016-06-02
    • 国際学会

URL: 

公開日: 2018-01-16  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi