Research Project
Grant-in-Aid for Young Scientists (B)
PCクラスタにおける大規模並列入出力を実現するため、日本原子力研究開発機構システム計算科学センターで開発された異機種計算機間通信ライブラリStampiに、新たにPCクラスタで大規模並列入出力を行うための機能拡張と性能評価を行った。PCクラスタで利用可能な並列ファイルシステムであるPVFSは大規模な並列入出力機能を提供するが、異なる計算機からは利用できない。そこでStampiの持つ計算機間入出力機能を用い、PVFSへのリモート入出力機能を実現した。計算機間の入出力はリモート計算機上に起動した入出力を行うMPI-I/Oプロセスにより行われる。PVFSへの入出力はUNIXが提供する入出力関数とPVFSが提供するネイティブな入出力関数の両方が利用できるが、計算機間のデータ通信がボトルネックになる問題を抱えていた。そこで、MPI-I/Oプロセスに循環バッファ機構を導入した。この循環バッファは、各バッファ長とバッファの段数がユーザ・プログラムから変更できるようになっており、この二つのパラメタを変更し、計算機間入出力の性能が向上する組み合わせを調査し、最適な組み合わせを探した。この性能評価により、この循環バッファを用いることにより、循環バッファが保持できるデータ長以内であれば、このバッファに入出力操作並びに通信待ちになるデータを一時的に保持する事が出来、全体の性能が向上することを実証した。さらに数値計算で共通データ形式をサポートする入出力インタフェースでも利用可能にするために開発されたparallel netCDFインタフェースによる計算機間入出力機能について基本的な入出力関数の実装を試みた。さらにその性能を評価し、その有用性を実証すると共に、問題点を洗い出した。
All 2006 2005 2004 Other
All Journal Article (12 results) Publications (2 results)
IEICE Transactions on Information and Systems E89-D, No.2
Pages: 425-432
110004719307
Proceedings of the 11th International Conference on Parallel and Distributed Systems (ICPADS 2005), Volume II Workshops (IEEE Computer Society Press)
Pages: 694-698
Current Trends in High Performance Computing and Its Applications (Springer)
Pages: 135-144
High Performance Computing and Communications, Lecture Notes in Computer Science (Springer) 3726
Pages: 585-594
Proceedings of the 17th TASTED International Conference on Parallel and Distributed Computing and Systems (PDCS2005) (ACTA Press)
Pages: 490-495
情報処理学会研究報告 2005-HPC-104 Vol.2005, No.97
Pages: 19-24
110002952974
Proceedings of Parallel and Distributed Computing and Networks (PDCN2005), ACTA Press
Pages: 228-233
情報処理学会研究報告 2005・19
Pages: 187-192
110002775122
Grid and Cooperative Computing, Lecture Notes in Computer Science, Springer 3033
Pages: 129-136
Proceedings of HPC Asia 2004,IEEE Computer Society Press
Pages: 136-139
Distributed and Parallel Systems, Cluster and Grid Computing, Kluwer International Series in Engineering and Computer Science, Springer 777
Pages: 47-54
Parallel and Distributed Processing and Applications, Lecture Notes in Computer Science, Springer 3358
Pages: 34-43