分散マスタによる高信頼性・高性能ＭａｐＲｅｄｕｃｅの実現

2013 年度 研究成果報告書

• 研究課題/領域番号: 23700036
• 研究種目: 若手研究(B)
• 配分区分: 基金
• 研究分野: ソフトウエア
• 研究機関: 大阪大学
• 研究代表者: 置田 真生 大阪大学, 情報科学研究科, 助教 (50563988)
• 研究期間 (年度): 2011 – 2013
• キーワード: 並列処理・分散処理 / MapReduce

研究概要

近年普及が進んでいる大規模並列分散処理フレームワークMapReduceについて、耐故障性の向上およびアプリケーション高速化のための新手法の開発を行った。
まず、耐故障性向上のためにフレームワークを拡張した。従来のフレームワークではマスタと呼ばれる計算機が単一障害点となる。本研究では、複数のマスタを分散配置し障害を自動的に回避する新フレームワークを開発した。
次に、アプリケーションの高速化のために中間データ処理を効率化する手法を開発した。従来手法とは異なる観点から中間データを圧縮することでよりデータ量を削減できること、およびデータの局所性を高めることで中間データの転送量を削減できることを示した。

研究成果

• [雑誌論文] A Versatile Platform for Multilevel Modeling of Physiological Systems : SBML-PHML Hybrid Modeling and Simulation (2014)
  • 著者名/発表者名: Yoshiyuki Asai, Takeshi Abe, Hideki Oka, Masao Okita, Kenichi Hagihara, Samik Ghosh, Yukiko Matsuoka, Yoshihisa Kurachi, Taishin Nomura, and Hiroaki Kitano
  • 雑誌名: Advanced Biomedical Engineering 巻: Vol.3 ページ: 50-58
  • DOI: 10.14326/abe.3.50
  • 査読あり
• [雑誌論文] Accelerating ODE-based Simulation of General and Heterogeneous Biophysical Models using a GPU
  • 著者名/発表者名: Tomohiro Okuyama, Masao Okita, Takeshi Abe, Yoshiyuki Asai, Hiroaki Kitano, Taishin Nomura, and Kenichi Hagihara
  • 雑誌名: IEEE Transactions on Parallel and Distributed Systems 巻: (採録決定)
  • DOI: 10.1109/TPDS.2013.198
  • 査読あり
• [学会発表] A versatile platform for multilevel modeling of physiological systems : Template/instance framework for large-scale modeling and simulation (2013)
  • 著者名/発表者名: Yoshiyuki Asai, Takeshi Abe, Hideki Oka, Masao Okita, Tomohiro Okuyama, Kenichi Hagihara, Samik Ghosh, Yukiko Matsuoka, and Hiroaki Kitano
  • 学会等名: 35th Annual International Conference of the IEEE Engineering in Medicine and Biology Society (EMBC'13)
  • 発表場所: Osaka, Japan
  • 年月日: 2013-07-06
• [学会発表] MapReduce を用いたグラフアプリケーションにおける重複メッセージの排除による高速化 (2013)
  • 著者名/発表者名: 黒松信行, 置田真生, 萩原兼一
  • 学会等名: 第11回先進的計算基盤システムシンポジウム論文集(SACSIS 2013)
  • 発表場所: 仙台, 日本
  • 年月日: 2013-05-22
• [学会発表] Evolving fault-tolerance in Hadoop with robust auto-recovering JobTracker (2012)
  • 著者名/発表者名: Nobuyuki Kuromatsu, Masao Okita, and Kenichi Hagihara
  • 学会等名: Proceedings of the 3rd International Conference on Networking and Computing (ICNC 2012)
  • 発表場所: Okinawa, Japan
  • 年月日: 2012-12-07
• [学会発表] Hadoop の性能ボトルネックを特定するための実行トレース可視化ツール (2012)
  • 著者名/発表者名: 古谷達朗, 置田真生, 萩原兼一
  • 学会等名: 平成24年度情報処理学会関西支部支部大会講演論文集
  • 発表場所: 大阪, 日本
  • 年月日: 2012-09-21
• [学会発表] Multilevel modeling of Physiological Systems and Simulation Platform : PhysioDesigner, Flint and Flint K3 service (2012)
  • 著者名/発表者名: Yoshiyuki Asai, Takeshi Abe, Masao Okita, Tomohiro Okuyama, Nobukazu Yoshioka, Shigetoshi Yokoyama, Masaru Nagaku, Kenichi Hagihara, and Hiroaki Kitano
  • 学会等名: Proceedings of the 12th IEEE/IPSJ International Symposium on Applications and the Internet (SAINT 2012)
  • 発表場所: Izmir, Turkey
  • 年月日: 2012-07-17
• [学会発表] 系列パターン抽出のMapReduce 実装におけるタスク分割方式の検討 (2011)
  • 著者名/発表者名: 井上佑希, 置田真生, 萩原兼一
  • 学会等名: 情報処理学会研究報告, 2010-HPC-130
  • 発表場所: 鹿児島,日本
  • 年月日: 2011-07-29
• [学会発表] Hadoop におけるジョブトラッカの耐故障機能の検討 (2011)
  • 著者名/発表者名: 黒松信行, 置田真生, 萩原兼一
  • 学会等名: 第9回先進的計算基盤システムシンポジウム論文集(SACSIS 2011)
  • 発表場所: 東京, 日本
  • 年月日: 2011-05-26