Hadoop社區(qū)正式支持騰訊云COS,全球大數(shù)據(jù)開發(fā)者將無(wú)縫使用中國(guó)云存儲(chǔ)

CSDN資訊
大數(shù)據(jù)分析需要花費(fèi)大量的計(jì)算和存儲(chǔ)資源。在傳統(tǒng)模式下,計(jì)算與存儲(chǔ)資源耦合度較高,一旦資源不夠,就需要對(duì)二者同時(shí)進(jìn)行擴(kuò)容。近年來(lái),在云計(jì)算的推動(dòng)下,開發(fā)者逐漸開始采用云上對(duì)象存儲(chǔ),來(lái)實(shí)現(xiàn)計(jì)算與存儲(chǔ)的分離,進(jìn)而提升資源的靈活性,并降低成本。

8月4日消息,知名大數(shù)據(jù)開源社區(qū)Hadoop近日宣布對(duì)騰訊云對(duì)象存儲(chǔ)COS的正式支持。后續(xù),開發(fā)者在基于Hadoop架構(gòu)進(jìn)行大數(shù)據(jù)分析時(shí),能夠在不修改代碼的情況下,無(wú)縫高效地使用騰訊云COS來(lái)處理海量數(shù)據(jù)的讀寫任務(wù)。

大數(shù)據(jù)分析需要花費(fèi)大量的計(jì)算和存儲(chǔ)資源。在傳統(tǒng)模式下,計(jì)算與存儲(chǔ)資源耦合度較高,一旦資源不夠,就需要對(duì)二者同時(shí)進(jìn)行擴(kuò)容。近年來(lái),在云計(jì)算的推動(dòng)下,開發(fā)者逐漸開始采用云上對(duì)象存儲(chǔ),來(lái)實(shí)現(xiàn)計(jì)算與存儲(chǔ)的分離,進(jìn)而提升資源的靈活性,并降低成本。

Hadoop是目前應(yīng)用最為廣泛的分布式大數(shù)據(jù)處理框架,也是大數(shù)據(jù)處理領(lǐng)域事實(shí)上的標(biāo)準(zhǔn)。在數(shù)據(jù)價(jià)值越來(lái)越被重視的時(shí)代,Hadoop也在互聯(lián)網(wǎng)、政務(wù)、金融等行業(yè)中被廣泛使用。

騰訊云對(duì)象存儲(chǔ)COS是一種云端分布式存儲(chǔ)服務(wù),其底層采用騰訊自研存儲(chǔ)引擎YottaStore,能夠?qū)崿F(xiàn)單集群理論管理百萬(wàn)級(jí)節(jié)點(diǎn),并且做到按需擴(kuò)容,磁盤利用率達(dá)到 90% 以上。

Hadoop社區(qū)支持騰訊云對(duì)象存儲(chǔ)以后,開發(fā)者在基于Hadoop架構(gòu)進(jìn)行大數(shù)據(jù)分析時(shí),能夠無(wú)縫使用到騰訊云對(duì)象存儲(chǔ)COS提供的高速云存儲(chǔ)服務(wù)。

“開發(fā)者在騰訊云上可以使用彈性 MapReduce(EMR)計(jì)算,并直接使用騰訊云對(duì)象存儲(chǔ)COS作為后端存儲(chǔ),整個(gè)過(guò)程都不需要額外添加代碼,更加方便和快捷。”騰訊云對(duì)象存儲(chǔ)負(fù)責(zé)人介紹。

目前,小紅書、獵豹移動(dòng)、珍愛網(wǎng)等就使用了騰訊云“EMR on COS”的計(jì)算與存儲(chǔ)分離模式,快速構(gòu)建和部署大數(shù)據(jù)分析程序,有效地滿足了大數(shù)據(jù)業(yè)務(wù)需求。

THEEND

最新評(píng)論(評(píng)論僅代表用戶觀點(diǎn))

更多
暫無(wú)評(píng)論