本文來自微信公眾號“數(shù)據(jù)驅(qū)動智能”,作者/曉曉。
趨勢#1:數(shù)據(jù)產(chǎn)品
像對待有價值的產(chǎn)品一樣對待數(shù)據(jù)
數(shù)據(jù)產(chǎn)品思維對于任何想要在復(fù)雜的數(shù)據(jù)驅(qū)動世界中發(fā)展的組織來說都是必不可少的。通過數(shù)據(jù)消費者的視角來看待數(shù)據(jù)是實現(xiàn)這一目標(biāo)的唯一途徑。
數(shù)據(jù)不僅僅是一些信息——它有可能為整個組織的數(shù)據(jù)消費者提供有形的價值?,F(xiàn)在是時候通過采用數(shù)據(jù)產(chǎn)品思維方式來相應(yīng)地處理它,以滿足企業(yè)的整體業(yè)務(wù)戰(zhàn)略。
通過采用數(shù)據(jù)產(chǎn)品的思維方式,可以將注意力從簡單地將數(shù)據(jù)視為孤立的實體轉(zhuǎn)移到考慮用戶的需求并以有助于他們成功的方式打包數(shù)據(jù)。這涉及創(chuàng)建一個結(jié)合數(shù)據(jù)的有凝聚力的產(chǎn)品,以及用戶有效利用它所需的工具和資源。打包數(shù)據(jù)產(chǎn)品以提高其可用性的示例包括:
1.確定與誰聯(lián)系以解決有關(guān)數(shù)據(jù)的問題。
2.有關(guān)如何使用它的適合受眾的文檔,例如字段定義、示例報告、儀表板或查詢。
3.有關(guān)數(shù)據(jù)本身的信息——例如新鮮度和來源。
目標(biāo)是改善每個人的數(shù)據(jù)消費者體驗,并減少遺留解決方案中經(jīng)常存在的復(fù)雜依賴性和所有權(quán)問題。數(shù)據(jù)產(chǎn)品可以單獨使用,也可以與其他產(chǎn)品結(jié)合使用,以回答組織內(nèi)日益復(fù)雜的問題。
要采用數(shù)據(jù)產(chǎn)品思維方式,首先要確定數(shù)據(jù)消費者對特定數(shù)據(jù)產(chǎn)品的需求,并尋找他們成功使用該產(chǎn)品所需的共性。這可以幫助創(chuàng)建滿足多個團隊需求的數(shù)據(jù)產(chǎn)品。一旦擁有許多數(shù)據(jù)產(chǎn)品,數(shù)據(jù)網(wǎng)格就會變得有價值。
最終用戶體驗應(yīng)該始終是任何數(shù)據(jù)產(chǎn)品的核心。數(shù)據(jù)產(chǎn)品確保了這種情況——使其成為數(shù)據(jù)驅(qū)動型組織的必要條件。
趨勢#2:數(shù)據(jù)網(wǎng)格
使用數(shù)據(jù)網(wǎng)格清理數(shù)據(jù)混亂
實施數(shù)據(jù)網(wǎng)格需要承諾將數(shù)據(jù)視為一種產(chǎn)品,并采用去中心化的自助服務(wù)模型進行數(shù)據(jù)管理。雖然這種方法可以釋放數(shù)據(jù)的全部潛力并將其轉(zhuǎn)化為為您的組織帶來價值的強大資產(chǎn),但重要的是要確保您的團隊在投入之前已準備好迎接變革。
您是否覺得您的數(shù)據(jù)團隊的行動速度永遠不夠快,總是落后于需求曲線,并且花錢卻沒有產(chǎn)生可衡量的影響?也許更糟——您是否注意到,當(dāng)出現(xiàn)初步進展跡象時,您的團隊似乎放慢了腳步,無法跟上步伐以保持最初獲得的競爭優(yōu)勢?
數(shù)據(jù)網(wǎng)格是一種分散的方法,使團隊能夠創(chuàng)建自己的數(shù)據(jù)產(chǎn)品并與他人共享。它強調(diào)人與技術(shù)之間的互動,以改善協(xié)作和共享數(shù)據(jù)所有權(quán)——從而加快決策速度、提高敏捷性和競爭力,以及持續(xù)改進和創(chuàng)新。
要確定數(shù)據(jù)網(wǎng)格是否適合您的組織,請評估您當(dāng)前的數(shù)據(jù)處理方法是否滿足業(yè)務(wù)需求。如果您已達到純集中式方法無法解決的復(fù)雜程度,那么數(shù)據(jù)網(wǎng)格可能是一個可行的解決方案。
要成功實施數(shù)據(jù)網(wǎng)格策略,需要:
1.通過授權(quán)面向領(lǐng)域的團隊創(chuàng)建自己的數(shù)據(jù)產(chǎn)品,優(yōu)先創(chuàng)建能夠滿足消費者最緊迫需求的數(shù)據(jù)產(chǎn)品。
2.提供一個框架,使團隊可以輕松地創(chuàng)建、查找并與他人共享高質(zhì)量且一致的數(shù)據(jù)產(chǎn)品。
3.確保有明確的期望和機制來應(yīng)用數(shù)據(jù)產(chǎn)品的必要法律、合規(guī)性和安全要求。
數(shù)據(jù)網(wǎng)格策略并不適合所有企業(yè),尤其是當(dāng)數(shù)據(jù)團隊分散得太細或沒有適當(dāng)?shù)臄?shù)據(jù)治理時。如果沒有適當(dāng)?shù)牟呗?,您會發(fā)現(xiàn)自己陷入比開始時更大的混亂之中。
趨勢#3:事件驅(qū)動架構(gòu)
編排解耦工具的終極方法
事件驅(qū)動的架構(gòu)可幫助您的企業(yè)快速適應(yīng)變化并做出反應(yīng)。它使您的系統(tǒng)更靈活、更易于擴展,同時減少供應(yīng)商鎖定。
如今,組織在其現(xiàn)代數(shù)據(jù)架構(gòu)中使用了許多不同的基于云的工具和服務(wù)。隨著添加到架構(gòu)中的工具越多,創(chuàng)建的意外事件就越多,使得他們的工作協(xié)調(diào)更難管理。
管理工具集成的最簡單方法是安排以特定時間間隔運行的作業(yè)——但這也可能是最難維護的。通常,最好的編排方法是創(chuàng)建由事件驅(qū)動的工作流。
事件驅(qū)動的架構(gòu)就像管弦樂隊的指揮——它幫助所有不同的樂器和諧地協(xié)同工作。它使用事件消息在解耦的服務(wù)之間觸發(fā)和通信任務(wù),確保一切順利高效地運行。事件驅(qū)動架構(gòu)有很多好處,包括:
1.一旦數(shù)據(jù)可用,就可以對其進行處理。隔夜批量加載的滯后時間消失了。這是流式工作負載的基礎(chǔ),它還支持實時和接近實時的分析。代碼和數(shù)據(jù)之間的依賴性降低了,更容易在不中斷的情況下推出和維護。
2.云的成本和功能得到優(yōu)化,因為按需任務(wù)僅在需要時運行。費用服務(wù)全天候運行只是等待事情發(fā)生的日子已經(jīng)一去不復(fù)返了。
3.數(shù)據(jù)可觀察性增加且更直觀。當(dāng)一項任務(wù)未能達到其預(yù)期目的時,工程師可以快速查明失敗的后續(xù)事件,診斷是哪個組件導(dǎo)致的,并在其他事件并行繼續(xù)進行時修復(fù)它。
事件驅(qū)動架構(gòu)不是全有或全無的追求。在開發(fā)任何新的工作負載之前,先問問自己它是否可以是事件驅(qū)動的架構(gòu)。如果您希望重構(gòu)現(xiàn)有工作負載,請解決維護起來最麻煩的工作負載。
人生苦短,無法不斷管理損壞的數(shù)據(jù)管道和工作流程。實施事件驅(qū)動方法的次數(shù)越多,就越需要花更多的時間來尋找方法,以便在節(jié)省資金的同時為組織的利益使用數(shù)據(jù)。
趨勢4:機器學(xué)習(xí)操作(MLOps)
最大化您的擴展?jié)摿?/strong>
MLOps允許組織通過自動化和擴展他們的預(yù)測模型和流程,將他們的數(shù)據(jù)轉(zhuǎn)化為競爭優(yōu)勢。通過利用機器學(xué)習(xí)和數(shù)據(jù)科學(xué)的力量,組織可以提高效率、準確性和速度,并做出更好、更明智的決策。MLOps對于任何希望推動創(chuàng)新并在瞬息萬變的世界中保持領(lǐng)先地位的組織來說都是必不可少的。
機器學(xué)習(xí)(ML)并不新鮮,尤其是對于具有高級分析成熟度的組織而言。它已經(jīng)出現(xiàn)了一段時間,根據(jù)麥肯錫全球調(diào)查,人工智能工具的采用率持續(xù)增長,而且收益仍然很大。投資ML和AI技術(shù)的組織正在擴大其競爭優(yōu)勢并在整個組織中釋放額外價值。
然而,問題在于大規(guī)模重新部署ML模型并重新訓(xùn)練它們以使其保持相關(guān)性的能力。
進入機器學(xué)習(xí)操作(MLOps)——如果您準備好將數(shù)據(jù)科學(xué)視為不是一次性試點項目,而是現(xiàn)有數(shù)據(jù)分析環(huán)境的一個集成部分,那么應(yīng)該注意這一趨勢。這是構(gòu)建機器學(xué)習(xí)管道(而不僅僅是模型)的實踐,以確??梢宰詣踊蛢?yōu)化ML工作流程。
如果您正在使用現(xiàn)代數(shù)據(jù)堆棧,使用云原生AI工具,并且需要擴展ML用例——需要將MLOps視為數(shù)據(jù)策略的一部分。
從確定初始用例開始,評估技術(shù)、流程或內(nèi)部技能組合中的任何差距或障礙。然后尋找機會在所有業(yè)務(wù)領(lǐng)域加速機器學(xué)習(xí)工作的開發(fā)和部署。對于每個用例,您將改進模型訓(xùn)練并微調(diào)流程以獲得寶貴的見解和經(jīng)驗,并最終通過機器學(xué)習(xí)取得長期成功。
趨勢5:數(shù)據(jù)素養(yǎng)
賦予您的團隊數(shù)據(jù)技能
為了在當(dāng)今數(shù)據(jù)驅(qū)動的世界中保持競爭力,組織必須投資于數(shù)據(jù)素養(yǎng),以便業(yè)務(wù)用戶能夠有效地理解和使用數(shù)據(jù)。這可以帶來更好的業(yè)務(wù)成果、更好的決策制定以及將數(shù)據(jù)用作創(chuàng)新和增長的戰(zhàn)略資產(chǎn)的能力。
企業(yè)已經(jīng)在最新技術(shù)上投入了時間、金錢和資源。您已經(jīng)制定了數(shù)據(jù)戰(zhàn)略路線圖,實施了成功的數(shù)據(jù)倉庫,甚至探索了分析數(shù)據(jù)的新方法——但用戶仍未完全啟用。
如果您的業(yè)務(wù)用戶仍在努力理解何時使用數(shù)據(jù)以及如何解釋數(shù)據(jù)——您的組織缺乏數(shù)據(jù)素養(yǎng)。
你不是一個人。根據(jù)Gartner年度首席數(shù)據(jù)官調(diào)查,數(shù)據(jù)素養(yǎng)是數(shù)據(jù)驅(qū)動組織取得成功的第二大內(nèi)部障礙——到2023年,它將成為推動業(yè)務(wù)價值的關(guān)鍵。
那么怎么知道是否有數(shù)據(jù)素養(yǎng)問題呢?尋找一些常見的跡象,包括用戶對數(shù)據(jù)和分析產(chǎn)品的采用率低、整個組織的效率明顯低下、缺乏有用的見解或數(shù)據(jù)使用不成熟等。僅憑這些原因并不意味著你有數(shù)據(jù)素養(yǎng)問題,但如果所有基礎(chǔ)部分已經(jīng)到位,但組織仍未實現(xiàn)業(yè)務(wù)目標(biāo),是時候進行更深入的挖掘了。
數(shù)據(jù)素養(yǎng)無法通過技術(shù)實現(xiàn)——這是您需要采用的一種做法。但是在某些事情到位后,您可以開始為您的業(yè)務(wù)用戶提供以下信息:
1.何時在業(yè)務(wù)流程中插入數(shù)據(jù)和分析
2.如何閱讀/解釋圖表和可視化
3.如何處理發(fā)現(xiàn)的見解
4.如何利用現(xiàn)有的報告和數(shù)據(jù)分析計劃
5.如何負責(zé)任、準確地使用數(shù)據(jù)
如果準備投資提高數(shù)據(jù)素養(yǎng),請首先評估業(yè)務(wù)用戶的具體需求并評估他們的分析成熟度。這將有助于確定需要額外培訓(xùn)和支持的領(lǐng)域。圍繞提高數(shù)據(jù)素養(yǎng)制定的任何計劃都必須考慮在內(nèi),并整合到您的數(shù)據(jù)策略中。
請記住,數(shù)據(jù)素養(yǎng)的目標(biāo)是讓業(yè)務(wù)用戶了解他們在數(shù)據(jù)方面看到的、所做的和共享的內(nèi)容。