研究課題/領域番号 |
22H00509
|
研究機関 | 筑波大学 |
研究代表者 |
建部 修見 筑波大学, 計算科学研究センター, 教授 (70357432)
|
研究分担者 |
大辻 弘貴 富士通株式会社(富士通研究所), その他部局等, 研究員 (10870016)
|
研究期間 (年度) |
2022-04-01 – 2027-03-31
|
キーワード | ストレージシステム / 並列I/O / 高性能システム |
研究実績の概要 |
本研究は、スーパコンピュータシステムにおける重要課題となっているストレージ性能問題を解決するため、不揮発性メモリを活用した新しいストレージシステムのアーキテクチャの研究を行うものである。2022年度においては、計算ノードの不揮発性メモリを有効活用する一時的な並列ストレージシステム(アドホックファイルシステム)の設計を行った。2023年度においては、そのアドホックファイルシステムに対する高度化の設計を実施した。アドホックファイルシステムは、スーパーコンピュータが通常用いる並列ファイルシステムと計算ノードの間に存在する高速なストレージであるが、並列ファイルシステムとアドホックファイルシステムの間のデータ移動は自動的にはなされない。このデータ移動はステージイン、ステージアウトと呼ばれるが、その処理が正しく行われないと読み込みたいデータが読み込めなかったり、書き込んだデータが並列ファイルシステムに書き込まれなくなる。一方で、この処理を自動化すると、既存のシステムではアドホックファイルシステムの性能が落ちてしまう問題があった。この問題について、アドホックファイルシステムと並列ファイルシステムの間の一貫性を、ユーザに分かりやすい範囲で緩和することにより解決を図った。成果は国際会議で発表した。また、データ解析、機械学習フレームワークにおいて、アドホックファイルシステムを利用するための研究を進めた。それらのフレームワークでは、データの入出力にApache Arrowが多く利用されており、Apache Arrowの拡張を行い問題解決を図った。成果については国際会議で発表した。
|
現在までの達成度 (区分) |
現在までの達成度 (区分)
1: 当初の計画以上に進展している
理由
ストレージシステムの評価がスムーズに進み、データ移動を自動的に行うシステムの設計まで進めたため。
|
今後の研究の推進方策 |
データ移動を自動的に行うシステムの高度化を進めるとともに、さらに高度なストレージシステムの設計を進める。
|