本文來(lái)自IT168網(wǎng)站,作者/陶然。
隨著數(shù)據(jù)在復(fù)雜性和數(shù)量上的增長(zhǎng),企業(yè)需要更好的方法來(lái)管理數(shù)據(jù),這就是數(shù)據(jù)網(wǎng)格和數(shù)據(jù)結(jié)構(gòu)的用武之地,這是兩個(gè)比較流行的下一代數(shù)據(jù)管理概念,兩者各有所長(zhǎng),但又互為補(bǔ)充。
我們將分解這兩個(gè)概念,并研究如何使用這些解決方案來(lái)利用企業(yè)數(shù)據(jù)進(jìn)行更好的決策。
什么是數(shù)據(jù)網(wǎng)格?
2019年,Zhamak Dehghani將數(shù)據(jù)網(wǎng)格定義為一個(gè)基于四個(gè)核心原則的數(shù)據(jù)管理概念,即,域所有權(quán);作為產(chǎn)品的數(shù)據(jù);自助數(shù)據(jù)平臺(tái);聯(lián)合計(jì)算治理。
傳統(tǒng)的數(shù)據(jù)管理模型側(cè)重于信息的中央存儲(chǔ)庫(kù),而數(shù)據(jù)網(wǎng)格概念采用了更分布式的方法。在此模型下,每個(gè)團(tuán)隊(duì)或部門負(fù)責(zé)管理自己的數(shù)據(jù),并創(chuàng)建所有人都可以使用的聯(lián)邦系統(tǒng)。
這種方法有幾個(gè)優(yōu)點(diǎn):首先,它有助于確保數(shù)據(jù)是準(zhǔn)確和新鮮,因?yàn)槊總€(gè)團(tuán)隊(duì)都負(fù)責(zé)維護(hù)自己的記錄,它促進(jìn)了透明度和協(xié)作,因?yàn)閳F(tuán)隊(duì)可以看到組織內(nèi)其他人是如何使用數(shù)據(jù)的。其次,數(shù)據(jù)網(wǎng)格消除了對(duì)集中式IT基礎(chǔ)設(shè)施的需求,為組織提供了更靈活和可伸縮的數(shù)據(jù)管理方式。
數(shù)據(jù)網(wǎng)格概念的價(jià)值還在于,它能夠?yàn)榻M織的數(shù)據(jù)創(chuàng)建單一的真實(shí)源,同時(shí)為單個(gè)業(yè)務(wù)單元提供更大的控制。這有助于防止數(shù)據(jù)豎井,并使治理和管理組織的整體數(shù)據(jù)資產(chǎn)變得更容易。
此外,自助數(shù)據(jù)平臺(tái)原則使業(yè)務(wù)用戶能夠在需要時(shí)更容易地訪問(wèn)所需的數(shù)據(jù),這有助于改進(jìn)決策,提高操作效率。最終,數(shù)據(jù)網(wǎng)格概念可以為不斷增長(zhǎng)的數(shù)據(jù)資產(chǎn)的組織提供顯著的好處。
什么是數(shù)據(jù)結(jié)構(gòu)?
數(shù)據(jù)結(jié)構(gòu)是作為數(shù)據(jù)和連接過(guò)程的集成層的設(shè)計(jì)概念。Gartner較早的創(chuàng)造了這個(gè)術(shù)語(yǔ),它已經(jīng)成為思考數(shù)據(jù)管理的一種流行方式。
數(shù)據(jù)結(jié)構(gòu)利用對(duì)已知、標(biāo)識(shí)和推斷的元數(shù)據(jù)資源的持續(xù)分析,這使得跨多個(gè)平臺(tái)、數(shù)據(jù)類型、位置共享和重用數(shù)據(jù)成為可能。
數(shù)據(jù)結(jié)構(gòu)利用人工和自動(dòng)化功能來(lái)獲得對(duì)現(xiàn)有數(shù)據(jù)的訪問(wèn)權(quán),或在適當(dāng)?shù)那闆r下幫助進(jìn)行數(shù)據(jù)整合,它通過(guò)識(shí)別和連接來(lái)自不同來(lái)源的數(shù)據(jù),找到不同應(yīng)用程序數(shù)據(jù)點(diǎn)之間不同的、與業(yè)務(wù)相關(guān)的連接。這種洞察力允許重新設(shè)計(jì)決策,通過(guò)快速訪問(wèn)和理解產(chǎn)生比傳統(tǒng)數(shù)據(jù)管理技術(shù)更大的價(jià)值。
在典型的設(shè)置中,數(shù)據(jù)結(jié)構(gòu)從數(shù)據(jù)管道的被動(dòng)觀察者開(kāi)始,隨著時(shí)間的推移,它開(kāi)始使用人工智能和機(jī)器學(xué)習(xí)功能來(lái)提出更有效的數(shù)據(jù)處理方法。
數(shù)據(jù)結(jié)構(gòu)不是數(shù)據(jù)管道、數(shù)據(jù)倉(cāng)庫(kù)或數(shù)據(jù)湖,而是建立在這些概念之上的數(shù)據(jù)管理的下一個(gè)邏輯步驟。
數(shù)據(jù)網(wǎng)格vs數(shù)據(jù)結(jié)構(gòu)
數(shù)據(jù)網(wǎng)格和數(shù)據(jù)結(jié)構(gòu)都是管理數(shù)據(jù)的方法,強(qiáng)調(diào)治理、發(fā)現(xiàn)和重用。然而,兩者之間有一些關(guān)鍵的區(qū)別。
數(shù)據(jù)網(wǎng)格是數(shù)據(jù)產(chǎn)品的網(wǎng)絡(luò),每個(gè)數(shù)據(jù)產(chǎn)品都有一個(gè)定義良好的所有者,并且可以通過(guò)API(應(yīng)用程序編程接口)訪問(wèn)。相比之下,數(shù)據(jù)結(jié)構(gòu)是一個(gè)集中式平臺(tái),它支持創(chuàng)建數(shù)據(jù)產(chǎn)品,并為消費(fèi)者提供單一訪問(wèn)點(diǎn)。
然而,正如開(kāi)頭所提到的,這兩個(gè)概念是互補(bǔ)的,可以共存。例如,可以使用數(shù)據(jù)結(jié)構(gòu)對(duì)資產(chǎn)進(jìn)行編目,將其轉(zhuǎn)換為產(chǎn)品,并遵循聯(lián)邦治理策略,這將使數(shù)據(jù)消費(fèi)者能夠以多種方式使用數(shù)據(jù)產(chǎn)品,例如將數(shù)據(jù)產(chǎn)品發(fā)布到目錄、搜索它們以及通過(guò)API查詢或可視化數(shù)據(jù)產(chǎn)品信息。
數(shù)據(jù)結(jié)構(gòu)元數(shù)據(jù)還可以用于發(fā)現(xiàn)數(shù)據(jù)產(chǎn)品生產(chǎn)過(guò)程中的模式,或者在監(jiān)視數(shù)據(jù)產(chǎn)品時(shí)發(fā)現(xiàn)模式,然后將這些活動(dòng)自動(dòng)化。
為什么增強(qiáng)數(shù)據(jù)很重要?
隨著企業(yè)數(shù)據(jù)量的不斷增長(zhǎng),增強(qiáng)數(shù)據(jù)管理變得越來(lái)越重要。
增強(qiáng)的數(shù)據(jù)管理幫助組織更好地管理其數(shù)據(jù)資產(chǎn),提高數(shù)據(jù)質(zhì)量并減少手工干預(yù)的需要。此外,增強(qiáng)數(shù)據(jù)管理可以提供組織數(shù)據(jù)的統(tǒng)一視圖、自動(dòng)將元數(shù)據(jù)管理和主數(shù)據(jù)模型的生成。
在數(shù)據(jù)高速增長(zhǎng)的時(shí)代,增強(qiáng)數(shù)據(jù)管理為滿足需求提供了急需的解決方案。
利用這些數(shù)據(jù)管理概念可以幫助改進(jìn)決策、提高操作效率并防止數(shù)據(jù)豎井。所有這些因素在當(dāng)今的商業(yè)環(huán)境中都很重要,可以幫助組織獲得競(jìng)爭(zhēng)優(yōu)勢(shì)。