• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Research-status Report

大規模並列計算機用高精度演算環境の構築と演算精度自動チューニングの研究

Research Project

Project/Area Number 18K11340
Research InstitutionKogakuin University

Principal Investigator

田中 輝雄  工学院大学, 情報学部(情報工学部), 教授 (90622837)

Co-Investigator(Kenkyū-buntansha) 長谷川 秀彦  筑波大学, 図書館情報メディア系, 教授 (20164824)
Project Period (FY) 2018-04-01 – 2024-03-31
Keywords高精度計算 / 大規模並列処理 / 自動チューニング / 機械学習
Outline of Annual Research Achievements

本研究の課題について、それぞれ研究実績を項目ごとにまとめる。
(a)高並列計算機用高精度演算環境の構築:①倍々精度演算ライブラリのAVX-512への対応に関しては、複数の混合制度での対応を共通関数化で実装し、完了とする。②GMP向けMPIコード自動生成に関しては、今年度の進捗はない。③大規模並列計算機用高精度演算環境における通信量削減方式の実現に関しては、RDMA通信およびセマフォによる同期処理の削減によるデータ通信手法の研究について発表した。
(b)④高精度並列計算アルゴリズムの開発としては2件の検討を行なった。まず、ベクトルデータの格納方式であるAoSとSoAについて比較分析を行い、キャッシュに入るサイズではSoAの効果があり、キャッシュに入りきらないサイズでは性能に差がなく、使い勝手の良いAoSでも充分であることを示した。また、GPUを用いた計算において、従来からCUDAでの記述が主流であったが、近年、ディレクティブベースの記述方法が実現されており、性能面から評価を行った。その結果、複数の計算機環境での性能特性が異なることを示した。
⑤自動チューニング技術の適用については、複数個所の同時性能パラメタチューニングを指向した。また、機械学習など、今後、半精度を含め、混合精度演算が重要となると考える分野に対する適用を試みた。
研究成果の公開として、③に対して、計算工学講演会で1件の口頭発表を行った。④に対して、情報処理学会全国大会(2023.3)で2件の口頭発表を行った。内1件は学生奨励賞を受賞した。⑤に対して、国際学会(HPCAsia2023、於:シンガポール)にて、1件の口頭発表および1件のポスター発表を行った。ポスター発表は、HPC Asia 2023 BEST STUDENT POSTER AWARD 3rd Placeを受賞した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

研究実績の概要に示したように、課題①-⑤については、個別に研究を進めている。特に、④と⑤を組み合わせることにより、目標を達成する成果が期待できる。また、外部識者との議論があまりできておらず、公開まではいかなかったが、実質、改良ならびに評価は進められている。
課題⑤については、自動チューニングに適用するべき項目が明らかになってきた。さらに、実装と実証実験を進め、発表による情報公開を行う。

Strategy for Future Research Activity

今年度まで得られた成果をもとに、さらに、成果を実現するための実装ならびに実証実験を進める。また、それをもとに国内外に発表による外部識者からのフィードバックを受けることを進める。課題については、近年実用化が進んでいるディレクティブ方式によるGPU利用による高精度演算への適用などを進めていく。

Causes of Carryover

コロナ禍の対応のため、今年度から成果発表を開始したが、まだ、予定の発表がすべてできていないため。
国内外の学会(情報処理学会HPC研究会、HPC Asia、SuperComputing(SC)など)での発表を計画している。

  • Research Products

    (5 results)

All 2023 2022

All Presentation (5 results) (of which Int'l Joint Research: 2 results)

  • [Presentation] Parallelization of Automatic Tuning for Hyperparameter Optimization of Pedestrian Route Prediction Applications using Machine Learning2023

    • Author(s)
      Sorataro Fujika, Yuga Yajima, Teruo Tanaka, Akihiro Fujii, Yuka Kato, Satoshi Ohshima, Takahiro Katagiri
    • Organizer
      HPC Asia '23: Proceedings of the International Conference on High Performance Computing in Asia-Pacific Region
    • Int'l Joint Research
  • [Presentation] Applying Automatic Tuning to Hyper-parameter Optimization of Machine Learning Programs for Super-Resolution (Poster)2023

    • Author(s)
      Xuan Yang, Sorataro Fujika, Yuga Yajima, Akihiro Fujii, Teruo Tanaka, Kazutoshi Akita, Norimichi Ukita
    • Organizer
      HPC Asia '23: Proceedings of the International Conference on High Performance Computing in Asia-Pacific Region
    • Int'l Joint Research
  • [Presentation] 複数のGPU向けプログラミングモデルを用いた 倍々精度疎行列ベクトル積の特性分析2023

    • Author(s)
      寺田洋人,慈道亮人,菱沼利彰,藤井昭宏,田中輝雄
    • Organizer
      第85回情報処理学会全国大会
  • [Presentation] 倍々精度SpMVにおけるSIMD利用時のデータレイアウトによる性能分析2023

    • Author(s)
      慈道亮人,寺田洋人,菱沼利彰,藤井昭宏,田中輝雄
    • Organizer
      第85回情報処理学会全国大会
  • [Presentation] FX1000におけるダブルバッファリングとRDMAを用いた隣接通信の性能評価2022

    • Author(s)
      吉本 航太、藤井 昭宏、田中 輝雄
    • Organizer
      第26回 計算工学講演会

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi