• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

次世代ストレージアーキテクチャの研究

研究課題

研究課題/領域番号 22H00509
研究種目

基盤研究(A)

配分区分補助金
応募区分一般
審査区分 中区分60:情報科学、情報工学およびその関連分野
研究機関筑波大学

研究代表者

建部 修見  筑波大学, 計算科学研究センター, 教授 (70357432)

研究分担者 大辻 弘貴  富士通株式会社(富士通研究所), その他部局等, 研究員 (10870016)
研究期間 (年度) 2022-04-01 – 2027-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
42,120千円 (直接経費: 32,400千円、間接経費: 9,720千円)
2025年度: 6,760千円 (直接経費: 5,200千円、間接経費: 1,560千円)
2024年度: 11,180千円 (直接経費: 8,600千円、間接経費: 2,580千円)
2023年度: 6,370千円 (直接経費: 4,900千円、間接経費: 1,470千円)
2022年度: 11,050千円 (直接経費: 8,500千円、間接経費: 2,550千円)
キーワードストレージシステム / 並列I/O / 高性能システム
研究開始時の研究の概要

スーパコンピュータの発展により演算性能が向上し多くの諸問題が解決されてきた。一方、ビッグデータサイエンス、AIをさらに進めるためにはストレージ性能が大きな問題となっている。ストレージに格納されたビッグデータを高速に処理するためにはストレージの入出力性能の向上が必須となるが、その性能向上が演算性能の向上に追い付いていないためである。本研究では、この問題を解決するため、不揮発性メモリを用いた次世代ストレージアーキテクチャの提案を行う。

研究実績の概要

本研究は、スーパコンピュータシステムにおける重要課題となっているストレージ性能問題を解決するため、不揮発性メモリを活用した新しいストレージシステムのアーキテクチャの研究を行うものである。2022年度においては、計算ノードの不揮発性メモリを有効活用する一時的な並列ストレージシステム(アドホックファイルシステム)の設計を行った。2023年度においては、そのアドホックファイルシステムに対する高度化の設計を実施した。アドホックファイルシステムは、スーパーコンピュータが通常用いる並列ファイルシステムと計算ノードの間に存在する高速なストレージであるが、並列ファイルシステムとアドホックファイルシステムの間のデータ移動は自動的にはなされない。このデータ移動はステージイン、ステージアウトと呼ばれるが、その処理が正しく行われないと読み込みたいデータが読み込めなかったり、書き込んだデータが並列ファイルシステムに書き込まれなくなる。一方で、この処理を自動化すると、既存のシステムではアドホックファイルシステムの性能が落ちてしまう問題があった。この問題について、アドホックファイルシステムと並列ファイルシステムの間の一貫性を、ユーザに分かりやすい範囲で緩和することにより解決を図った。成果は国際会議で発表した。また、データ解析、機械学習フレームワークにおいて、アドホックファイルシステムを利用するための研究を進めた。それらのフレームワークでは、データの入出力にApache Arrowが多く利用されており、Apache Arrowの拡張を行い問題解決を図った。成果については国際会議で発表した。

現在までの達成度 (区分)
現在までの達成度 (区分)

1: 当初の計画以上に進展している

理由

ストレージシステムの評価がスムーズに進み、データ移動を自動的に行うシステムの設計まで進めたため。

今後の研究の推進方策

データ移動を自動的に行うシステムの高度化を進めるとともに、さらに高度なストレージシステムの設計を進める。

報告書

(3件)
  • 2023 実績報告書
  • 2022 審査結果の所見   実績報告書
  • 研究成果

    (26件)

すべて 2024 2023 2022

すべて 雑誌論文 (5件) (うち査読あり 5件、 オープンアクセス 1件) 学会発表 (21件) (うち国際学会 8件、 招待講演 1件)

  • [雑誌論文] I/O-Aware Flushing for HPC Caching Filesystem2023

    • 著者名/発表者名
      Osamu Tatebe, Kohei Hiraga, Hiroki Ohtsuji
    • 雑誌名

      2023 IEEE International Conference on Cluster Computing Workshops (CLUSTER Workshops)

      巻: 1 ページ: 11-17

    • DOI

      10.1109/clusterworkshops61457.2023.00012

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Accelerating I/O in Distributed Data Processing Systems with Apache Arrow CHFS2023

    • 著者名/発表者名
      Koyama Sohei、Hiraga Kohei、Tatebe Osamu
    • 雑誌名

      Proceedings of 3rd Workshop on Re-envisioning Extreme-Scale I/O for Emerging Hybrid HPC Workloads (REX-IO)

      巻: - ページ: 1-4

    • DOI

      10.1109/clusterworkshops61457.2023.00009

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Caching Support for CHFS Node-local Persistent Memory File System2022

    • 著者名/発表者名
      Tatebe Osamu、Ohtsuji Hiroki
    • 雑誌名

      Proceedings of 3rd Workshop on Extreme-Scale Storage and Analysis (ESSA 2022)

      巻: - ページ: 1103-1110

    • DOI

      10.1109/ipdpsw55747.2022.00182

    • 関連する報告書
      2022 実績報告書
    • 査読あり
  • [雑誌論文] Scalable Data Parallel Distributed Training for Graph Neural Networks2022

    • 著者名/発表者名
      Koyama Sohei、Tatebe Osamu
    • 雑誌名

      Proceedings of Workshop on AI for Datacenter Optimization (ADOPT'22)

      巻: - ページ: 699-707

    • DOI

      10.1109/ipdpsw55747.2022.00121

    • 関連する報告書
      2022 実績報告書
    • 査読あり
  • [雑誌論文] Cygnus - World First Multihybrid Accelerated Cluster with GPU and FPGA Coupling2022

    • 著者名/発表者名
      Boku Taisuke、Fujita Norihisa、Kobayashi Ryohei、Tatebe Osamu
    • 雑誌名

      Proceedings of 2nd International Workshop on Deployment and Use of Accelerators (DUAC)

      巻: - ページ: 1-8

    • DOI

      10.1145/3547276.3548629

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] FINCHFS: Design of Ad-hoc File System for High-Performance Computing Workload2024

    • 著者名/発表者名
      Sohei Koyama, Kohei Hiraga, Osamu Tatebe
    • 学会等名
      22nd USENIX Conference on File and Storage Technologies (FAST)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] PMEMBB: 不揮発性メモリとMPI片側通信を用いたMPI-IOバーストバッファの設計2024

    • 著者名/発表者名
      平賀 弘平, 建部 修見
    • 学会等名
      第193回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] CA VOL: HDF5におけるコンテキストによるI/O最適化2024

    • 著者名/発表者名
      木下 嵩裕, 建部 修見
    • 学会等名
      第193回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] I/O-Aware Flushing for HPC Caching Filesystem2023

    • 著者名/発表者名
      Tatebe Osamu、Hiraga Kohei、Ohtsuji Hiroki
    • 学会等名
      3rd Workshop on Re-envisioning Extreme-Scale I/O for Emerging Hybrid HPC Workloads (REX-IO)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Accelerating I/O in Distributed Data Processing Systems with Apache Arrow CHFS2023

    • 著者名/発表者名
      Koyama Sohei、Hiraga Kohei、Tatebe Osamu
    • 学会等名
      3rd Workshop on Re-envisioning Extreme-Scale I/O for Emerging Hybrid HPC Workloads (REX-IO)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Fast Checkpointing of Large Language Models with TensorStore CHFS2023

    • 著者名/発表者名
      Sohei Koyama, (Advisor) Kohei Hiraga, Osamu Tatebe
    • 学会等名
      The International Conference for High Performance Computing, Networking, Storage, and Analysis (SC)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Apache Arrow CHFSによるビッグデータ処理のI/O高速化2023

    • 著者名/発表者名
      小山 創平, 平賀 弘平, 建部 修見
    • 学会等名
      第190回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Pegasusビッグメモリスーパコンピュータの性能評価2023

    • 著者名/発表者名
      建部 修見, 平賀 弘平, 前田 宗則, 藤田 典久, 小林 諒平, 額田 彰
    • 学会等名
      第190回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] FINCHFS: アドホック並列ファイルシステムの設計2023

    • 著者名/発表者名
      小山 創平, 平賀 弘平, 建部 修見
    • 学会等名
      第192回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] スパースセグメントを活用した局所性志向バーストバッファにおけるフラッシュ手法の検討2023

    • 著者名/発表者名
      杉原 航平, 建部 修見
    • 学会等名
      第192回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] NVMe SSD環境におけるCHFSの設計最適化の検討2023

    • 著者名/発表者名
      丸山 泰史, 建部 修見
    • 学会等名
      第192回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] RustのUCXラッパーasync-ucxの性能評価2023

    • 著者名/発表者名
      中野 将生, 平賀 弘平, 建部 修見
    • 学会等名
      第192回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Persistent Memory Supercomputer Pegasus for Data-driven and AI-driven Science2023

    • 著者名/発表者名
      Osamu Tatebe
    • 学会等名
      IXPUG Workshop at HPC Asia 2023
    • 関連する報告書
      2022 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] Caching Support for CHFS Node-local Persistent Memory File System2022

    • 著者名/発表者名
      Tatebe Osamu、Ohtsuji Hiroki
    • 学会等名
      3rd Workshop on Extreme-Scale Storage and Analysis (ESSA 2022)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Scalable Data Parallel Distributed Training for Graph Neural Networks2022

    • 著者名/発表者名
      Koyama Sohei、Tatebe Osamu
    • 学会等名
      Workshop on AI for Datacenter Optimization (ADOPT'22)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Cygnus - World First Multihybrid Accelerated Cluster with GPU and FPGA Coupling2022

    • 著者名/発表者名
      Boku Taisuke、Fujita Norihisa、Kobayashi Ryohei、Tatebe Osamu
    • 学会等名
      2nd International Workshop on Deployment and Use of Accelerators (DUAC)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] 不揮発性メモリを用いた分散オブジェクトストレージの設計2022

    • 著者名/発表者名
      巨畠 和樹,建部 修見
    • 学会等名
      第184回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] HPC環境を想定した探索的データ解析におけるノードローカルストレージの利用の検討2022

    • 著者名/発表者名
      巨畠 和樹,小山 創平,平賀 弘平,建部 修見
    • 学会等名
      第185回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] CHFSアドホック並列分散ファイルシステムのアクセス性能の評価2022

    • 著者名/発表者名
      建部 修見
    • 学会等名
      第185回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] MPI-IO/CHFS:ノードローカル不揮発性メモリを活用するアドホック分散ファイルシステムのためのMPI-IOの設計2022

    • 著者名/発表者名
      平賀 弘平,建部 修見
    • 学会等名
      第185回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 分散キャッシュファイルシステムの設計と実装2022

    • 著者名/発表者名
      笠井 大暉,建部 修見
    • 学会等名
      第186回情報処理学会ハイパフォーマンスコンピューティング研究発表会
    • 関連する報告書
      2022 実績報告書

URL: 

公開日: 2022-04-19   更新日: 2025-04-17  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi