12月15日8時,氣象大數(shù)據(jù)云平臺“天擎”1.0版本在國家氣象信息中心及北京、天津、山西等28個?。ㄗ灾螀^(qū)、直轄市)氣象局開展業(yè)務(wù)試運(yùn)行,預(yù)示著氣象業(yè)務(wù)正式適應(yīng)大數(shù)據(jù)時代,有效推進(jìn)業(yè)務(wù)和政務(wù)管理技術(shù)體系的轉(zhuǎn)型升級。南大通用GBase 8a MPP數(shù)據(jù)庫將有效支撐“天擎”氣象大數(shù)據(jù)云平臺,助力100PB級海量數(shù)據(jù)的在線存儲、管理和應(yīng)用。
大數(shù)據(jù)時代的序幕已經(jīng)開啟。當(dāng)前,氣象部門已積累海量數(shù)據(jù)資源,隨著監(jiān)測更加精密化和多源數(shù)據(jù)廣泛匯集,氣象數(shù)據(jù)持續(xù)爆炸式增長。初步預(yù)計(jì),部門內(nèi)外氣象數(shù)據(jù)到2022年將達(dá)到45PB,日增量40TB。與此同時,海量數(shù)據(jù)快速匯聚和加工、長序列數(shù)據(jù)在線分析、部門內(nèi)外多源數(shù)據(jù)綜合應(yīng)用、基于數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)而發(fā)展的智能預(yù)報(bào)和服務(wù)算法等都需要大數(shù)據(jù)技術(shù)支撐。
“天擎”可將氣象行業(yè)數(shù)據(jù)與算法資源整合,使算法向數(shù)據(jù)靠攏,從而解決過去各業(yè)務(wù)系統(tǒng)反復(fù)調(diào)用、存儲、傳輸帶來的冗余問題,成為氣象部門適應(yīng)大數(shù)據(jù)時代,推進(jìn)氣象業(yè)務(wù)系統(tǒng)轉(zhuǎn)型升級、優(yōu)化全流程業(yè)務(wù)的重要抓手。
“天擎”的本質(zhì)特征是“云+端”,有了它,算法開發(fā)和運(yùn)行者不用關(guān)心數(shù)據(jù)在哪里,只需開發(fā)和提交算法,就可運(yùn)行出產(chǎn)品。再結(jié)合高性能的算力支撐和流水線調(diào)度運(yùn)行,使全局業(yè)務(wù)流程達(dá)到最優(yōu)化,促進(jìn)應(yīng)用協(xié)同。
GBase 8a MPP數(shù)據(jù)庫是“天擎”大數(shù)據(jù)平臺的重要組成部分,助力天擎100PB級海量數(shù)據(jù)在線存儲、管理和應(yīng)用,在國省構(gòu)建高效的分布式實(shí)時歷史一體化數(shù)據(jù)存儲管理系統(tǒng),滿足海量數(shù)據(jù)的存取和分析時效要求。有效推進(jìn)國省氣象數(shù)據(jù)共享和氣象業(yè)務(wù)應(yīng)用信息化、集約化進(jìn)程。
未來,“天擎”建設(shè)完成后,在100PB級海量數(shù)據(jù)在線存儲的同時,國家氣象局與各省核心實(shí)時數(shù)據(jù)可實(shí)現(xiàn)秒級同步;實(shí)時交互應(yīng)用可實(shí)現(xiàn)亞秒級響應(yīng),歷史長序列分析和多維空間分析秒級響應(yīng);新的信息技術(shù)支撐,可帶動氣象預(yù)報(bào)和服務(wù)模型的智能化發(fā)展。