自動(dòng)駕駛汽車、仿生機(jī)器人和自主送貨的無人機(jī)是我們今天看到的數(shù)字化轉(zhuǎn)型的尤物，不時(shí)出現(xiàn)在新聞?lì)^條。不過如果沒有第四次工業(yè)革命的石油--數(shù)據(jù)以及分析技術(shù)來讓我們解讀和理解數(shù)據(jù)，這些都是不可能實(shí)現(xiàn)的。
大數(shù)據(jù)是一個(gè)術(shù)語，它被用來描述處理數(shù)據(jù)的技術(shù)和實(shí)踐，這些數(shù)據(jù)不僅數(shù)量大，速度快，而且有許多不同的形式。埃隆·馬斯克的自動(dòng)駕駛汽車以及杰夫·貝佐斯的無人便利店背后，都有一個(gè)復(fù)雜的大數(shù)據(jù)系統(tǒng)和一支聰明的數(shù)據(jù)科學(xué)家隊(duì)伍，他們已經(jīng)把愿景變成了現(xiàn)實(shí)。
“大數(shù)據(jù)”這個(gè)詞可能不像幾年前那樣無處不在，因?yàn)樗w現(xiàn)的許多概念已經(jīng)徹底融入了我們周圍的世界。不過大數(shù)據(jù)并沒有過時(shí)，事實(shí)上，即使在今天，大多數(shù)組織也在努力從其所能接觸到數(shù)據(jù)中獲得價(jià)值。作為一種商業(yè)實(shí)踐，大數(shù)據(jù)仍然處于非常初級(jí)的階段。
因此，以下是我對(duì)一些關(guān)鍵趨勢(shì)的看法，這些趨勢(shì)將影響今年和不久的將來如何將數(shù)據(jù)和分析用于工作和生活中。
AI推動(dòng)更深入的洞察力和更復(fù)雜的自動(dòng)化進(jìn)程
人工智能(AI)改變了分析領(lǐng)域的游戲規(guī)則。由于公司及其客戶生成了大量結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，自動(dòng)手動(dòng)分析也只能觸及表面。
今天使用的人工智能，最簡(jiǎn)單的思維方式是計(jì)算機(jī)和軟件能夠自我學(xué)習(xí)。舉個(gè)簡(jiǎn)單的例子，我們的客戶中，哪一個(gè)對(duì)我們最有價(jià)值?
如果是傳統(tǒng)的、非學(xué)習(xí)型的計(jì)算方式，可以通過建立一個(gè)數(shù)據(jù)庫來探究一下哪些客戶花錢最多。但是，如果出現(xiàn)了一個(gè)新客戶，第一次交易就花了100美元，該客戶是否比過去一年每月消費(fèi)10美元的客戶更有價(jià)值?要了解這一點(diǎn)，我們需要更多的數(shù)據(jù)，比如客戶的平均終身價(jià)值，客戶本身的個(gè)人數(shù)據(jù)，比如他們的年齡、消費(fèi)習(xí)慣或收入水平也會(huì)很有用!
從數(shù)據(jù)集中解讀、理解和得出見解是一項(xiàng)復(fù)雜得多的任務(wù)。這就需要人工智能，因?yàn)樗梢試L試解釋所有數(shù)據(jù)，無論是否理解數(shù)據(jù)之間的關(guān)聯(lián)，并根據(jù)我們所知道的一切預(yù)測(cè)客戶終身價(jià)值。它不一定會(huì)得出“正確”或“錯(cuò)誤”的答案，但是能夠提供一個(gè)概率范圍，然后根據(jù)這些預(yù)測(cè)的準(zhǔn)確性進(jìn)行改進(jìn)。
探索和解釋數(shù)據(jù)的新方法
數(shù)據(jù)可視化是分析過程中的“最后一英里”，然后我們才會(huì)根據(jù)我們的發(fā)現(xiàn)采取行動(dòng)。傳統(tǒng)上，人機(jī)交互是通過可視化來進(jìn)行的，采取圖形、圖表和儀表盤的形式，突出關(guān)鍵的發(fā)現(xiàn)，幫助我們獲得數(shù)據(jù)價(jià)值。
問題是，并不是所有的人都能洞察隱藏在一堆統(tǒng)計(jì)數(shù)據(jù)中的潛在價(jià)值。隨著組織內(nèi)每個(gè)人從數(shù)據(jù)中獲得洞察越來越重要，新的技術(shù)和方法也不斷發(fā)展。
其中一個(gè)取得重大突破的領(lǐng)域是人類語言的使用。分析工具可以讓我們對(duì)數(shù)據(jù)提出問題，并以清晰的人類語言獲得答案，這將極大地增加對(duì)數(shù)據(jù)的訪問，并提高組織的整體數(shù)據(jù)能力。這一技術(shù)領(lǐng)域被稱為自然語言處理(NLP)。
另一個(gè)是新技術(shù)，沉浸式體驗(yàn)發(fā)揮數(shù)據(jù)價(jià)值。擴(kuò)展現(xiàn)實(shí)(XR)這個(gè)術(shù)語包括虛擬現(xiàn)實(shí)(VR)和增強(qiáng)現(xiàn)實(shí)(AR)，他們是推動(dòng)創(chuàng)新的動(dòng)力。VR可以用來創(chuàng)建新型的可視化，讓我們從數(shù)據(jù)中傳遞出更豐富的意義，而AR則可以直接向我們展示數(shù)據(jù)分析的結(jié)果如何實(shí)時(shí)影響世界。例如，一個(gè)試圖診斷汽車問題的機(jī)械師可能會(huì)戴著AR眼鏡查看發(fā)動(dòng)機(jī)，并預(yù)測(cè)哪些部件可能有問題，哪些部件可能需要更換。在不久的將來，我們應(yīng)該期待可視化或數(shù)據(jù)交流的新方式的應(yīng)用。
混合云和邊緣計(jì)算
云計(jì)算是另一個(gè)對(duì)大數(shù)據(jù)分析方法產(chǎn)生巨大影響的技術(shù)趨勢(shì)。無需昂貴的本地基礎(chǔ)設(shè)施的情況下，就能夠訪問龐大的數(shù)據(jù)存儲(chǔ)和對(duì)實(shí)時(shí)信息采取行動(dòng)，這推動(dòng)了按需提供數(shù)據(jù)驅(qū)動(dòng)服務(wù)的應(yīng)用程序和初創(chuàng)公司的發(fā)展。但完全依賴公有云提供商并不是最佳業(yè)務(wù)模式，當(dāng)你將整個(gè)數(shù)據(jù)操作托付給第三方時(shí)，難免對(duì)數(shù)據(jù)安全和治理產(chǎn)生擔(dān)憂。
許多公司現(xiàn)正在嘗試混合云系統(tǒng)，其中一些信息保存在AWS、微軟Azure或谷歌云等公有云服務(wù)器上，而其它個(gè)人或敏感數(shù)據(jù)則部署在本地或私有云。云提供商也不斷布局混合云，提供“云-本地”解決方案，提供公共云的所有豐富功能和穩(wěn)健性，但允許數(shù)據(jù)所有者完全保管其數(shù)據(jù)。
邊緣計(jì)算是另一個(gè)強(qiáng)勁的趨勢(shì)，它將在未來一年內(nèi)影響大數(shù)據(jù)和分析。從本質(zhì)上講，邊緣計(jì)算意味著設(shè)備在收集數(shù)據(jù)的地方處理數(shù)據(jù)，不用將其發(fā)送到云端進(jìn)行存儲(chǔ)和分析。有些場(chǎng)景對(duì)時(shí)延要求很高，比如從自動(dòng)汽車上的傳感器收集的數(shù)據(jù)，需要及時(shí)處理。此外，當(dāng)消費(fèi)者可以直接從他們的設(shè)備中收集洞察力，而無需將數(shù)據(jù)發(fā)送給任何第三方時(shí)，隱私也有了一定的保障。例如，谷歌新安卓手機(jī)上的Now Playing功能會(huì)持續(xù)掃描環(huán)境中的音樂，因此它可以告訴我們超市中播放的歌曲或我們正在觀看的電影的名稱。這在純基于云的解決方案中是不可能的，因?yàn)橛脩魰?huì)拒絕向谷歌發(fā)送全天候的音頻環(huán)境流。
DataOps的崛起
DataOps是一種方法和實(shí)踐，它借鑒了軟件開發(fā)中的DevOps框架。DataOps(數(shù)據(jù)操作)是一門新興學(xué)科，將DevOps團(tuán)隊(duì)與數(shù)據(jù)工程師和數(shù)據(jù)科學(xué)家角色結(jié)合在一起，提供一些工具、流程和組織結(jié)構(gòu)服務(wù)于以數(shù)據(jù)為中心的企業(yè)。
DataOps工作不需要任何正式的培訓(xùn)，對(duì)IT職業(yè)感興趣的人希望從事創(chuàng)新的項(xiàng)目，這通常是數(shù)據(jù)項(xiàng)目，DataOps為其提供了一個(gè)很好的機(jī)會(huì)，我們還將看到“DataOps即服務(wù)”供應(yīng)商的普及，提供數(shù)據(jù)流程和管道的端到端管理，并按需付費(fèi)。這將繼續(xù)降低小型組織和初創(chuàng)組織的進(jìn)入門檻，這些組織對(duì)新的數(shù)據(jù)驅(qū)動(dòng)服務(wù)有很好的想法，但缺少實(shí)現(xiàn)這些想法所需的基礎(chǔ)設(shè)施。
原作者：Bernard Marr
