QoS Guarantees on High Performance Shared Storage Systems for Large-scale HPC Clusters

• Project/Area Number: 23680004
• Research Category: Grant-in-Aid for Young Scientists (A)
• Allocation Type: Single-year Grants
• Research Field: Computer system/Network
• Research Institution: National Institute of Advanced Industrial Science and Technology
• Principal Investigator: TANIMURA Yusuke 独立行政法人産業技術総合研究所, 情報技術研究部門, 主任研究員 (80415710)
• Project Period (FY): 2011 – 2012
• Project Status: Completed (Fiscal Year 2012)
• Budget Amount: ¥28,730,000 (Direct Cost: ¥22,100,000、Indirect Cost: ¥6,630,000); Fiscal Year 2012: ¥5,460,000 (Direct Cost: ¥4,200,000、Indirect Cost: ¥1,260,000); Fiscal Year 2011: ¥23,270,000 (Direct Cost: ¥17,900,000、Indirect Cost: ¥5,370,000)
• Keywords: ハイパフォーマンスコンピューティング / 並列分散ストレージ / データストレージ / 大規模ファイルシステム / 性能保証 / ストレージ資源管理

Research Abstract

We developed an I/O scheduling method which controls write performance to our object-based storage device (OSD) backed by the Solid State Drive. The OSD is used in the Papio storage system, which provides I/O performance guarantees by controlling all stor

Research Products

• [Journal Article] Reservation-based I/O Performance Guarantee for MPI-IO Applications using Shared Storage Systems (2012)
  • Author(s): Yusuke Tanimura, Rosa Filgueira, Isao Kojima, Malcolm Atkinson
  • Journal Title: SC '12 Companion (Proceedings of the 2012 companion on High Performance Computing Networking, Storage and Analysis) Pages: 1-2
  • Peer Reviewed
• [Journal Article] 予約に基づくストレージ QoS 実現のための S3 REST API の拡張実装 (2012)
  • Author(s): 谷村勇輔、柳田誠也
  • Journal Title: 情報処理学会研究報告 Volume: 2012-HPC-136 Pages: 1-6
  • NAID: 110009453387
• [Journal Article] I/O Performance Isolation on A Shared Storage System for MPI-IO Applications (2012)
  • Author(s): Yusuke Tanimura, Rosa Filgueira, Isao Kojima, Malcolm Atkinson
  • Journal Title: SACSIS2012 論文集 Pages: 24-25
• [Journal Article] ユーザによる明示的な予約に基づき I/O 性能を保証する分散ストレージシステム (2012)
  • Author(s): 谷村勇輔、鯉江英隆、工藤知宏、小島功、田中良夫
  • Journal Title: 情報処理学会論文誌コンピューティングシステム(ACS38) Volume: 5(3) Pages: 42-56
  • NAID: 40019469267
  • Peer Reviewed
• [Journal Article] ユーザによる明示的な予約に基づきI/O性能を保証する分散ストレージシステム (2012)
  • Author(s): 谷村勇輔, 鯉江英隆, 工藤知宏, 小島功, 田中良夫
  • Journal Title: 情報処理学会論文誌コンピューティングシステム（ACS） Volume: 5 Pages: 42-56
  • NAID: 40019469267
  • Peer Reviewed
• [Journal Article] I/O Performance Isolation on A Shared Storage System for MPI-IO Applications (2012)
  • Author(s): Yusuke Tanimura, Rosa Filgueira, Isao Kojima, Malcolm Atkinson
  • Journal Title: SACSIS 2012論文集 Volume: 1 Pages: 24-25
• [Journal Article] 予約に基づくストレージQoS実現のためのS3 REST APIの拡張実装 (2012)
  • Author(s): 谷村勇輔, 柳田誠也
  • Journal Title: 情報処理学会研究報告 Volume: 2012-HPC-136 Pages: 1-6
  • NAID: 110009453387
• [Journal Article] ユーザによる明示的な予約に基づきI/O性能を保証する分散ストレージシステム (2012)
  • Author(s): 谷村勇輔, 鯉江英隆, 工藤知宏, 小島功, 田中良夫
  • Journal Title: 情報処理学会論文誌コンピューティングシステム(ACS38) Volume: 5(掲載確定)(未定)
  • NAID: 40019469267
  • Peer Reviewed
• [Journal Article] SSD を用いたオブジェクトベース・ストレージデバイスの I/O (2011)
  • Author(s): 谷村勇輔、鯉江英隆、工藤知宏、小島功
  • Journal Title: 性能制御 Volume: 2011-HPC-130 Pages: 1-8
• [Journal Article] SSDを用いたオブジェクトベース・ストレージデバイスのI/O性能制御 (2011)
  • Author(s): 谷村勇輔, 鯉江英隆, 工藤知宏, 小島功
  • Journal Title: 情報処理学会研究報告 Volume: 2011-HPC-130 Pages: 1-8
  • NAID: 110008583387
• [Presentation] Extension of S3 REST API for Providing QoS Support in Cloud Storage (2013)
  • Author(s): 谷村勇輔
  • Organizer: 11th USENIX Conference on File and Storage Technologies
  • Place of Presentation: Fairmont San Jose (California、 USA)
  • Year and Date: 2013-02-13
• [Presentation] Extension of S3 REST API for Providing QoS Support in Cloud Storage (2013)
  • Author(s): Yusuke Tanimura
  • Organizer: 11th USENIX Conference on File and Storage Technologies
  • Place of Presentation: San Jose, California, USA
• [Presentation] Reservation-based I/O Performance Guarantee for MPI-IO Applications using Shared StorageSystems (2012)
  • Author(s): 谷村勇輔
  • Organizer: SC12 (The International Conference for High Performance Computing Networking, Storage and Analysis)
  • Place of Presentation: Salt Palace Convention Center (Utah、USA)
  • Year and Date: 2012-11-13
• [Presentation] 予約に基づくストレージ QoS実現のための S3 REST API の拡張実装 (2012)
  • Author(s): 谷村勇輔
  • Organizer: 第136回ハイパフォーマンスコンピューティング研究発表会
  • Place of Presentation: 沖縄産業振興センター(沖縄県)
  • Year and Date: 2012-10-04
• [Presentation] I/O Performance Isolation on A Shared Storage System for MPI-IO Applications (2012)
  • Author(s): 谷村勇輔
  • Organizer: 先進的計算基盤システムシンポジウム(SACSIS 2012)
  • Place of Presentation: 神戸国際会議場(兵庫県)
  • Year and Date: 2012-05-16
• [Presentation] I/O Performance Isolation on A Shared Storage System for MPI-IO Applications (2012)
  • Author(s): Yusuke Tanimura
  • Organizer: 先進的計算基盤システムシンポジウム（SACSIS 2012）
  • Place of Presentation: 兵庫県神戸市
• [Presentation] 予約に基づくストレージQoS実現のためのS3 REST APIの拡張実装 (2012)
  • Author(s): 谷村勇輔
  • Organizer: 第136回ハイパフォーマンスコンピューティング研究発表会
  • Place of Presentation: 沖縄県那覇市
• [Presentation] Reservation-based I/O Performance Guarantee for MPI-IO Applications using Shared Storage Systems (2012)
  • Author(s): Yusuke Tanimura
  • Organizer: SC12 (The International Conference for High Performance Computing Networking, Storage and Analysis
  • Place of Presentation: Salt Lake City, Utah, USA
• [Presentation] Storage QoS for HPC Environments (2011)
  • Author(s): 谷村勇輔
  • Organizer: Research Exhibit of AIST in SC11
  • Place of Presentation: Washington State Convension Center, Seattle, Washington, USA
  • Year and Date: 2011-11-17
• [Presentation] Storage Research for Data-Intensive Applications (2011)
  • Author(s): 谷村勇輔
  • Organizer: DIR Seminar of the University of Edinburgh
  • Place of Presentation: DIR Seminar of the University of Edinburgh
  • Year and Date: 2011-08-19
• [Presentation] Storage Research for Data-Intensive Applications (2011)
  • Author(s): 谷村勇輔
  • Organizer: DIR Seminar of the University of Edinburgh
  • Place of Presentation: Informatics Forum, The University of Edinburgh, Edinburgh, UK
  • Year and Date: 2011-08-19
• [Presentation] SSD を用いたオブジェクトベース・ストレージデバイスの I/O 性能制御 (2011)
  • Author(s): 谷村勇輔
  • Organizer: 2011 年並列/分散/協調処理に関する『鹿児島』サマー・ワークショップ(SWoPP 鹿児島 2011)
  • Place of Presentation: かごしま県民交流センター(鹿児島県)
  • Year and Date: 2011-07-28
• [Presentation] SSDを用いたオブジェクトベース・ストレージデバイスのI/O性能制 (2011)
  • Author(s): 谷村勇輔
  • Organizer: 2011年並列/分散/協調処理に関する『鹿児島』サマー・ワークショップ(SWoPP鹿児島2011)
  • Place of Presentation: かごしま県民交流センター,鹿児島県鹿児島市
  • Year and Date: 2011-07-28
• [Presentation] Towards Performance-assured Cloud Storage (2011)
  • Author(s): 谷村勇輔
  • Organizer: Workshop on Science Agency Uses of Clouds and Grids
  • Place of Presentation: Salt Lake City Marriott Downtown(Utah、USA)
  • Year and Date: 2011-07-18
• [Presentation] Towards Performance-assured Cloud Storage (2011)
  • Author(s): 谷村勇輔
  • Organizer: Workshop on Science Agency Uses of Clouds and Grids
  • Place of Presentation: Salt Lake City Marriott Downtown, Salt Lake City, Utah, USA
  • Year and Date: 2011-07-18
• [Presentation] Storage QoS for HPC Environments (2011)
  • Author(s): 谷村勇輔
  • Organizer: Research Exhibit of AIST in SC11
  • Place of Presentation: Washington State Convension Center(Washington、USA)
• [Remarks] Papio に関する Web ページ(本研究成果の開発物、関連ソフトウェアについて記載)
  • URL: http://papio.apgrid.org/
• [Remarks] papioに関するWebページ
  • URL: http://papio.apgrid.org/