2023 Fiscal Year Annual Research Report
| Project/Area Number |
22H00509
|
|---|
| Research Institution | University of Tsukuba |
|---|
Principal Investigator |
建部 修見 筑波大学, 計算科学研究センター, 教授 (70357432)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
大辻 弘貴 富士通株式会社(富士通研究所), その他部局等, 研究員 (10870016)
|
|---|
| Project Period (FY) |
2022-04-01 – 2027-03-31
|
| Keywords | ストレージシステム / 並列I/O / 高性能システム |
|---|
| Outline of Annual Research Achievements |
本研究は、スーパコンピュータシステムにおける重要課題となっているストレージ性能問題を解決するため、不揮発性メモリを活用した新しいストレージシステムのアーキテクチャの研究を行うものである。2022年度においては、計算ノードの不揮発性メモリを有効活用する一時的な並列ストレージシステム（アドホックファイルシステム）の設計を行った。2023年度においては、そのアドホックファイルシステムに対する高度化の設計を実施した。アドホックファイルシステムは、スーパーコンピュータが通常用いる並列ファイルシステムと計算ノードの間に存在する高速なストレージであるが、並列ファイルシステムとアドホックファイルシステムの間のデータ移動は自動的にはなされない。このデータ移動はステージイン、ステージアウトと呼ばれるが、その処理が正しく行われないと読み込みたいデータが読み込めなかったり、書き込んだデータが並列ファイルシステムに書き込まれなくなる。一方で、この処理を自動化すると、既存のシステムではアドホックファイルシステムの性能が落ちてしまう問題があった。この問題について、アドホックファイルシステムと並列ファイルシステムの間の一貫性を、ユーザに分かりやすい範囲で緩和することにより解決を図った。成果は国際会議で発表した。また、データ解析、機械学習フレームワークにおいて、アドホックファイルシステムを利用するための研究を進めた。それらのフレームワークでは、データの入出力にApache Arrowが多く利用されており、Apache Arrowの拡張を行い問題解決を図った。成果については国際会議で発表した。
|
| Current Status of Research Progress |
Current Status of Research Progress
1: Research has progressed more than it was originally planned.
Reason
ストレージシステムの評価がスムーズに進み、データ移動を自動的に行うシステムの設計まで進めたため。
|
| Strategy for Future Research Activity |
データ移動を自動的に行うシステムの高度化を進めるとともに、さらに高度なストレージシステムの設計を進める。
|
