氣象大數(shù)據(jù)云平臺歸檔系統(tǒng)設(shè)計及實現(xiàn)
DOI:
作者:
作者單位:

作者簡介:

通訊作者:

中圖分類號:

基金項目:

國家發(fā)展改革委員會項目“海洋氣象綜合保障一期工程”資助


Design and Implementation of Meteorological Big Data Cloud Platform Archive Storage System
Author:
Affiliation:

Fund Project:

  • 摘要
    • |
  • 圖/表
    • |
  • 訪問統(tǒng)計
    • |
  • 參考文獻
    • |
  • 相似文獻
    • |
  • 引證文獻
    • |
  • 資源附件
    • |
  • 文章評論
    摘要:

    本文針對“天擎”歸檔系統(tǒng)的建設(shè)需求、總體架構(gòu)，提出系統(tǒng)實現(xiàn)的若干關(guān)鍵技術(shù)問題并進行深入分析，氣象大數(shù)據(jù)云平臺（以下簡稱“天擎”）歸檔系統(tǒng)設(shè)計為面向海量數(shù)據(jù)歸檔存儲的支撐系統(tǒng)，保障數(shù)據(jù)的安全完整。系統(tǒng)基于在線存儲、離線存儲以及磁帶庫管理軟件，通過層次性結(jié)構(gòu)體系、消息隊列和微服務(wù)技術(shù)框架，實現(xiàn)多協(xié)議數(shù)據(jù)歸檔、敏感數(shù)據(jù)歸檔及轉(zhuǎn)儲數(shù)據(jù)歸檔等功能，滿足各種新增數(shù)據(jù)歸檔業(yè)務(wù)場景，同時具備豐富的數(shù)據(jù)回取服務(wù)、數(shù)據(jù)全流程的追溯和規(guī)范化的磁帶管理保障等功能。2020年8月 “天擎”歸檔系統(tǒng)投入業(yè)務(wù)運行，每日歸檔的實時數(shù)據(jù)量約為10 TB，后續(xù)最高可承載約240 TB日數(shù)據(jù)量的歸檔業(yè)務(wù)。

    Abstract:

    This article focuses on a detailed introduction of the construction requirements and overall architecture of the Meteorological Big Data Cloud Platform (“Tianqing”) archive storage system, and an indepth analysis of several key technical issues of the platform implementation. “Tianqing” archive storage system is based on online storage, offline storage and tape drive management software. Through the hierarchical structure system, it establishes a dynamic and scalable archive cluster. The system implements multiprotocol data archiving and sensitive data archiving to meet various data archive scenarios. The system has data restoration, entire data process traceability, standardized tape management and other functions. In August 2020, the “Tianqing” archive storage system began to run operationally.

    參考文獻
    相似文獻
    引證文獻
引用本文

劉媛媛,何文春,王妍,李江濤,白金婷.氣象大數(shù)據(jù)云平臺歸檔系統(tǒng)設(shè)計及實現(xiàn)[J].氣象科技,2021,49(5):697~706

復(fù)制
分享
文章指標
  • 點擊次數(shù):
  • 下載次數(shù):
  • HTML閱讀次數(shù):
  • 引用次數(shù):
歷史
  • 收稿日期:2021-02-19
  • 定稿日期:2021-06-18
  • 錄用日期:
  • 在線發(fā)布日期: 2021-10-26
  • 出版日期: 2021-10-31
您是第位訪問者
技術(shù)支持：北京勤云科技發(fā)展有限公司
乐安县| 广丰县| 大连市| 和平区| 丰台区| 平远县| 山西省| 泉州市| 洪雅县| 衢州市| 四川省| 大埔区| 云梦县| 贺州市| 兴安盟| 九台市| 新昌县| 龙海市| 新营市| 阳泉市| 盈江县| 巴塘县| 宜州市| 岢岚县| 凤冈县| 大化| 磐石市| 德格县| 绍兴市| 观塘区| 西和县| 平武县| 青浦区| 娱乐| 奉贤区| 东乡族自治县| 永定县| 吴江市| 大竹县| 郎溪县| 蓬溪县|