中國(guó)高能物理實(shí)驗(yàn)的大數(shù)據(jù)對(duì)我國(guó)大數(shù)據(jù)的發(fā)展也做出了重要貢獻(xiàn)，北京正負(fù)電子對(duì)撞機(jī)數(shù)據(jù)處理是中國(guó)大數(shù)據(jù)發(fā)展的開(kāi)端。高能物理作為典型的大科學(xué)，過(guò)去數(shù)十年一直有力推動(dòng)信息技術(shù)的發(fā)展和創(chuàng)新，大科學(xué)產(chǎn)生大數(shù)據(jù)對(duì)IT技術(shù)提出了巨大的挑戰(zhàn)，包括數(shù)據(jù)采集、存儲(chǔ)、查詢、分析等等。
數(shù)據(jù)服務(wù)與大科學(xué)，隨著磁盤(pán)規(guī)模的增加，實(shí)際使用的難度和風(fēng)險(xiǎn)也增加。我們基于分布式的計(jì)算的資源共享，實(shí)現(xiàn)了對(duì)集群、網(wǎng)格和云等類(lèi)型的資源整合，有18個(gè)國(guó)內(nèi)外的站點(diǎn)加入了高能所的分布式的計(jì)算系統(tǒng)。有效提高了資源利用率，用戶可以不受地域的限制方便使用易購(gòu)的計(jì)算資源，實(shí)現(xiàn)共享。
另外，我們采用的云存儲(chǔ)解決存儲(chǔ)的可擴(kuò)展性，保證了讀寫(xiě)相互之間不受影響，從而提高了性能的可擴(kuò)展性。云存儲(chǔ)系統(tǒng)內(nèi)部副本機(jī)制提供了更好的容錯(cuò)性和讀取性能。如何將云存儲(chǔ)應(yīng)用到大科學(xué)項(xiàng)目仍存在許多需要研究的問(wèn)題。
大科學(xué)裝置產(chǎn)生大數(shù)據(jù)，必須依靠信息化存儲(chǔ)、傳輸分析大數(shù)據(jù)來(lái)開(kāi)展科學(xué)活動(dòng)，實(shí)現(xiàn)科學(xué)發(fā)現(xiàn)。同時(shí)大科學(xué)裝置也有力的推動(dòng)了信息化的發(fā)展。
