• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Enhancement of the ALMA data search system with an ultra-high-speed data visualization system that can handle TB-scale data.

Research Project

Project/Area Number 20K04030
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 16010:Astronomy-related
Research InstitutionNational Astronomical Observatory of Japan

Principal Investigator

SHIRASAKI Yuji  国立天文台, 天文データセンター, 助教 (70322667)

Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2022: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2021: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2020: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Keywords天文データアーカイブ / 分散処理 / データベース / 可視化 / 大規模データ / 可視化システム / データアーカイブ / ALMA / データビューア
Outline of Research at the Start

本研究では、ALMA のデータを可視化するサービス FITS WebQL を 100GB を越えるデータへ対応させる。一つのデータファイルを複数個に分割し、それらを並列処理することにより大容量のデータでも短時間で表示可能なシステムを構築する。また、ALMA データの「中身検索」を実現するために、ALMA キューブデータに対する天体・ライン検出を行い、それらをデータベース化する。検索条件として特定のラインを指定できるようにし、そのラインに対応する周波数域においてラインが検出されたデータを検索できるシステムを構築する。

Outline of Final Research Achievements

Multidimensional data acquired by ALMA continues to grow in size, and exceed 300 GB as of 2023. It is expected to exceed 1TB in the near future, and there is an urgent need to create a system for using such huge data via the Internet. In this research, we developed a data visualization to extract spectral data in a specified spatial region at high speed by dividing and arranging ALMA data on multiple servers and provide it to users. This function is available to anyone as the ALMA data quick look system (FITS WebQL) on the JVO portal site (http://jvo.nao.ac.jp/portal).

Academic Significance and Societal Importance of the Research Achievements

ALMA の高品質で巨大なデータを手元に全データをダウンロードするとことなく、必要な情報のみへ高速にアクセスすることが可能となり、アーカイブデータを効率的に活用することが可能となった。これによりALMAのデータを利用した科学的成果の最大化が期待される。また、今後の巨大なデータを生み出す観測計画への適用も可能である。今回開発したシステムは研究者のみならず、だれでも利用が可能であり学校教育においても最新の天文観測データを利用した教育活動に利用することができるであろう。

Report

(4 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (6 results)

All 2023 2022 2021 2020 Other

All Presentation (5 results) (of which Int'l Joint Research: 1 results) Remarks (1 results)

  • [Presentation] 分散クラスター対応の FITS WebQL SE v5 の試験運用開始2023

    • Author(s)
      ザパート クリストファー、白崎 裕治、大石 雅寿、水本 好彦、川崎 渉、小杉 城治、森田 英 輔、吉野 彰、林 洋平
    • Organizer
      日本天文学会2023年春季年会
    • Related Report
      2022 Annual Research Report
  • [Presentation] FITSWEBQLSE とその周辺(C/C++, FORTRAN, Rust, Julia, Python 等)2022

    • Author(s)
      ザパート クリストファー
    • Organizer
      日本天文学会2022年春季年会
    • Related Report
      2021 Research-status Report
  • [Presentation] Julia meets BIG DATA: JVO experience with distributed computing2021

    • Author(s)
      Christopher Zapart
    • Organizer
      Astronomical Data Analysis Software and Systems (ADASS) XXXI
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] JVO updates2021

    • Author(s)
      白崎裕治
    • Organizer
      ALMA/45m/ASTE Users Meeting 2021
    • Related Report
      2021 Research-status Report
  • [Presentation] FITSWebQL SE (Supercomputer Edition)の開発状況2020

    • Author(s)
      Christopher Zapart
    • Organizer
      日本天文学会2020年秋季年会
    • Related Report
      2020 Research-status Report
  • [Remarks] JVO ALMA FITS Archive

    • URL

      http://jvo.nao.ac.jp/portal/alma/archive.do

    • Related Report
      2022 Annual Research Report

URL: 

Published: 2020-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi