• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Annual Research Report

超並列システム向け可逆データ圧縮法の提案と実用化

Research Project

Project/Area Number 21H03417
Allocation TypeSingle-year Grants
Research InstitutionHiroshima University

Principal Investigator

中野 浩嗣  広島大学, 先進理工系科学研究科(工), 教授 (30281075)

Co-Investigator(Kenkyū-buntansha) 高藤 大介  広島大学, 先進理工系科学研究科(工), 助教 (00314732)
伊藤 靖朗  広島大学, 先進理工系科学研究科(工), 教授 (40397964)
Project Period (FY) 2021-04-01 – 2025-03-31
Keywordsデータ圧縮 / ビッグデータ処理 / 並列処理
Outline of Annual Research Achievements

現在幅広く利用されている可逆圧縮手法は,並列化による高速処理を前提に設計されておらず,本質的に逐次処理が必要なものが多い.そのため,GPUが身近にあるにもかかわらず,データの可逆圧縮の処理にその高い計算能力が活用されていない.本研究の目的は,GPUをターゲットに並列化による高速化が可能な効率良い可逆圧縮法を提案することである.本年度は,昨年度に開発したdeflateアルゴリズムの並列実行処理を,最新のGPU向けに最適化を行った. deflateアルゴリズムはgzip,zip等で幅広く用いられており,圧縮性能が高いため,もっともポピュラーな可逆のデータ圧縮方式である.deflate圧縮では,前方部分を辞書として用い,(オフセット,長さ)のペアの値に変換する.長さが長いほど,圧縮率が高くなる.さらに,オフセットと長さをハフマン符号により圧縮する.処理が逐次的なため,GPUによる並列化が困難であった.Deflateで用いる辞書をGPUにメモリ上に実装する際のデータ構造をGPUによる並列処理向けに改造した.また,理論的には,辞書のサイズを小さくしたり,ブロックサイズを小さくすると圧縮率が悪化するが,この悪化がほとんどおきないようにそれぞれのサイズを巧妙に設定する方法を開発した.また,CUDAブロックへのスレッドの分割サイズについてSKSS(Single Kernel Soft Synchronization)法が効率よく動作するよう最適化を行った.GPUの通常のプログラムは,バリア同期のために,複数のカーネルに分割し,このカーネルが逐次的に実行される.カーネル起動のオーバーヘッドは大きく,それが性能低下の大きな原因となる.SKSS法では,複数カーネルへの分割を避けて,1つのカーネルで切れ目なく並列処理を行うことができる.さらには,具体的なGPUによる並列処理への適用を試みた.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

逐次化が困難であったdeflateアルゴリズムをGPUへの実装を継続し,圧縮性能と処理時間において,高い性能を得ることができた. deflateアルゴリズムはその高い圧縮性能と計算処理の高速性から,最もよく用いられている可逆圧縮手法である.我々が開発したdeflateアルゴリズムのGPU実装により,特に大量のデータをGPUで扱う際のデータのやり取りを転送オーバーヘッドを気にすることなく処理を行うことができる.

Strategy for Future Research Activity

開発した可逆圧縮のためのdeflateアルゴリズムのGPU実装を外部プログラムから呼び出すためのAPIを整備し,実際の処理に適用が容易に行えるようにすることを目指す.また,大量のデータを用いるようなGPUを用いたアプリケーションに適用し,実用的であることを示す.大量のデータをアーカイブする際には,長時間の計算処理を行っても,データを小さく圧縮することが望まれる.そこで, GPUの計算能力をフルに活用し,計算時間を犠牲にしても高い圧縮率の達成を目指す.

  • Research Products

    (3 results)

All 2022

All Journal Article (2 results) (of which Peer Reviewed: 2 results) Presentation (1 results) (of which Int'l Joint Research: 1 results)

  • [Journal Article] GPU implementations of deflate encoding and decoding2022

    • Author(s)
      Takafuji Daisuke、Nakano Koji、Ito Yasuaki、Kasagi Akihiko
    • Journal Title

      Concurrency and Computation: Practice and Experience

      Volume: Early View Pages: e7454

    • DOI

      10.1002/cpe.7454

    • Peer Reviewed
  • [Journal Article] Graphics processing unit‐accelerated high‐quality watercolor painting image generation2022

    • Author(s)
      Huang Jiamian、Ito Yasuaki、Nakano Koji
    • Journal Title

      Concurrency and Computation: Practice and Experience

      Volume: Early View Pages: e7471

    • DOI

      10.1002/cpe.7471

    • Peer Reviewed
  • [Presentation] Graph-theoretic Formulation of QUBO for Scalable Local Search on GPUs2022

    • Author(s)
      Ryota Yasudo, Koji Nakano, Yasuaki Ito, Yuya Kawamata, Ryota Katsuki, Shiro Ozaki, Takashi Yazane, Kenichiro Hamano
    • Organizer
      24th Workshop on Advances in Parallel and Distributed Computational Models
    • Int'l Joint Research

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi