• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2021 Fiscal Year Research-status Report

テラバイト超データ高速可視化システム等によるALMAデータ検索機能の強化

Research Project

Project/Area Number 20K04030
Research InstitutionNational Astronomical Observatory of Japan

Principal Investigator

白崎 裕治  国立天文台, 天文データセンター, 助教 (70322667)

Project Period (FY) 2020-04-01 – 2023-03-31
Keywords可視化システム / データアーカイブ / 分散処理
Outline of Annual Research Achievements

本研究では ALMA 電波望遠鏡により取得された大規模データを高速に可視化するシステム FITS WebQL v5 を構築することを目的とする。また、ALMA で検出されたライン情報をデータベース化することにより、データの中身検索を行える機能を実現することも本研究の課題である。
令和三年度は以下の開発を実施した。
FITS WebQL v5 の開発:(1) 複数人による同時利用を想定し、メモリの利用が効率的に行わるよう実装言語ならびに利用するライブラリの再選定を行った。(2) データの圧縮アルゴリズムを見直し、これまでの半精度浮動小数点数への変換(圧縮率2倍)から固定少数点数への変換(圧縮率3.5倍)へと変更し、データの読み込み速度の向上を行った。(3) データの保存領域を NVMe 接続の SSD 4台の RAID0 で構築することにより、HDD 8台による RAID0 領域からのデータ読み込み速度にくらべて約2倍の高速化が達成された。(4) 七台の計算機を利用した並列読み込みならびに画像合成を機能を実装し、1TB のデータを数分のうちにメモリに読み込めるようになった。また、スペクトルデータの表示も任意の領域についてリアルタイムでストレスなく表示できることを確認した。
ALMA ラインデータ検索:ALMA データベースについては、全データについてライン検出を行い、それをデータベース化し検出されているラインの周波数や原子・分子種による検索が行なえるようになった。この機能は 2021年12月より試験公開されている。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

FITS WebQL v5 の開発は、すでに1TBのデータを必要十分な速度で可視化することができるようになっている。ALMA ラインデータ検索機能についてもすでに公開を開始している。

Strategy for Future Research Activity

FITS WebQL v5 の開発については、最終年度には旧バージョンの機能をすべて実装した上で、あらたな機能を追加し公開できる予定である。ALMA ラインデータ検索機能については、ライン検出アルゴリズムを見直すことにより誤検出の割合を減らすようにする予定である。

  • Research Products

    (3 results)

All 2022 2021

All Presentation (3 results) (of which Int'l Joint Research: 1 results)

  • [Presentation] FITSWEBQLSE とその周辺(C/C++, FORTRAN, Rust, Julia, Python 等)2022

    • Author(s)
      ザパート クリストファー
    • Organizer
      日本天文学会2022年春季年会
  • [Presentation] Julia meets BIG DATA: JVO experience with distributed computing2021

    • Author(s)
      Christopher Zapart
    • Organizer
      Astronomical Data Analysis Software and Systems (ADASS) XXXI
    • Int'l Joint Research
  • [Presentation] JVO updates2021

    • Author(s)
      白崎裕治
    • Organizer
      ALMA/45m/ASTE Users Meeting 2021

URL: 

Published: 2022-12-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi