兩年前馬云就曾說過:“如果你不參與大數(shù)據(jù)技術(shù)、云計(jì)算,不把自己的企業(yè)真正變成一個(gè)互聯(lián)網(wǎng)的制造業(yè),我相信你一定會(huì)像今天一樣抱怨和埋怨,此話一出,眾多企業(yè)開始紛紛布局大數(shù)據(jù)、云計(jì)算領(lǐng)域。”
現(xiàn)如今,企業(yè)管理者們幾乎每天都不可避免的會(huì)看到諸如“大數(shù)據(jù)”或“云服務(wù)”這樣的字眼。為了確保在當(dāng)今的市場(chǎng)上具有競(jìng)爭(zhēng)力,企業(yè)必須做出明智的業(yè)務(wù)決策,這些業(yè)務(wù)決策將產(chǎn)生真正的結(jié)果,無論這些結(jié)果是幫助增加企業(yè)的營(yíng)收,留住客戶還是提高產(chǎn)品的質(zhì)量。而大數(shù)據(jù)分析項(xiàng)目則是實(shí)現(xiàn)這些目標(biāo)的關(guān)鍵因素。
IDG公司將大數(shù)據(jù)定義為“企業(yè)從各種來源所收集的大量數(shù)據(jù)信息,包括來自企業(yè)應(yīng)用程序/數(shù)據(jù)庫(kù)的交易數(shù)據(jù)、社交媒體數(shù)據(jù)、移動(dòng)設(shè)備數(shù)據(jù),非結(jié)構(gòu)化數(shù)據(jù)/文檔,機(jī)器生成的數(shù)據(jù)等等。”IDG稱:各種各樣的高容量、高傳輸速度的數(shù)據(jù)信息資產(chǎn)可以為企業(yè)提供更好的見解,幫助企業(yè)做出業(yè)務(wù)決策。“
大數(shù)據(jù)使企業(yè)能夠更深入地了解自己的業(yè)務(wù),并實(shí)時(shí)制定戰(zhàn)略決策。事實(shí)上,據(jù)IDG 的《大數(shù)據(jù)和分析調(diào)研報(bào)告》稱:有1/3的受訪者表示,由于他們的所在企業(yè)實(shí)施了大數(shù)據(jù)項(xiàng)目,使得其決策質(zhì)量得到了提高,有助于更好地進(jìn)行規(guī)劃和預(yù)測(cè)。
但是,就如同任何新興技術(shù)一樣,由其所帶來的挑戰(zhàn)也是并存的。第一大挑戰(zhàn)是海量的數(shù)據(jù)量和傳輸速度。實(shí)時(shí)變化的海量數(shù)據(jù)意味著企業(yè)現(xiàn)有的工具和方法都將不再奏效。企業(yè)還要需要考慮數(shù)據(jù)的來源:在某些情況下,大數(shù)據(jù)來自于數(shù)百萬(wàn)個(gè)地方——這些來源包括:客戶、傳感器、網(wǎng)站和社交媒體。
企業(yè)以前所采用的方法是:通過構(gòu)建或擴(kuò)展企業(yè)容量的方式來處理大數(shù)據(jù)所帶來的工作負(fù)載。這是一項(xiàng)資源密集型的舉措,其成本代價(jià)昂貴、耗時(shí)。需要花費(fèi)大量IT人員的時(shí)間和技能,并且無法使您企業(yè)的業(yè)務(wù)足夠快的實(shí)現(xiàn)遷移。您企業(yè)最終可能需要花費(fèi)更多的時(shí)間和資金成本在基礎(chǔ)設(shè)施上,而不是將其用于打造好的產(chǎn)品和服務(wù)。
云服務(wù)可以幫助解決很多這些問題。毫不奇怪,在未來三到五年內(nèi),云服務(wù)和預(yù)測(cè)分析將是最有可能對(duì)企業(yè)產(chǎn)生顛覆性影響的技術(shù)之一,如果您企業(yè)要利用大數(shù)據(jù)進(jìn)行預(yù)測(cè)分析,那么,憑借著其諸多的優(yōu)勢(shì),云服務(wù)可能是一大關(guān)鍵的推動(dòng)因素。
盡管已經(jīng)有了大量的成功案例,但真正實(shí)施一項(xiàng)大數(shù)據(jù)項(xiàng)目并不是一件易事。事實(shí)上,其提出了許多挑戰(zhàn),其中任何一項(xiàng)挑戰(zhàn)都可能使項(xiàng)目在開始之前就脫軌。在其大數(shù)據(jù)和分析調(diào)查報(bào)告中,IDG確定了如下這5大挑戰(zhàn):
云計(jì)算
1、數(shù)據(jù)分析和管理人才的短缺
大數(shù)據(jù)系統(tǒng)的發(fā)展速度是如此之快,以至于當(dāng)前一般的企業(yè)幾乎不可能跟上其發(fā)展的步伐。新的工具、功能和框架在幾個(gè)月內(nèi)就能夠發(fā)展和成熟,導(dǎo)致企業(yè)在新興大數(shù)據(jù)技能方面存在著很大的差距,也就很容易阻礙企業(yè)大數(shù)據(jù)項(xiàng)目的發(fā)展。
事實(shí)上,有48%的企業(yè)受訪者認(rèn)為,在數(shù)據(jù)分析和數(shù)據(jù)管理技能方面的人才的短缺是他們所在企業(yè)所面臨的第一大挑戰(zhàn)。對(duì)大數(shù)據(jù)技能的需求(尤其是在分析領(lǐng)域)的需求如此之大,以至于70%的受訪者均表示他們計(jì)劃在未來的12到18個(gè)月內(nèi)雇用具備大數(shù)據(jù)分析技能的人才。
利用云服務(wù),企業(yè)可以利用最新的技術(shù),而無需投入大量的時(shí)間和資源來進(jìn)行持續(xù)的設(shè)置、維護(hù)和升級(jí)工作。云服務(wù)還允許企業(yè)使用他們已有的技能,而托管服務(wù)則可以完美的補(bǔ)充他們所缺乏的技能。
2、預(yù)算方面的限制
47%的受訪者表示,當(dāng)實(shí)施大數(shù)據(jù)項(xiàng)目時(shí),預(yù)算限制是當(dāng)今企業(yè)所面臨的第二大挑戰(zhàn)。成本因素已經(jīng)連續(xù)多年成為絕大多數(shù)企業(yè)所頭號(hào)關(guān)注的事實(shí)便證明了這一挑戰(zhàn)。
大多數(shù)大數(shù)據(jù)技術(shù)需要大量的服務(wù)器集群,而這需要很長(zhǎng)的配置和設(shè)置周期,進(jìn)而導(dǎo)致了大量的資本支出和維護(hù)開銷。更為復(fù)雜的是,隨著現(xiàn)有應(yīng)用程序或新業(yè)務(wù)需求的多樣化數(shù)據(jù)量的不斷增長(zhǎng),數(shù)據(jù)傳輸速度不斷增加,可能導(dǎo)致不可持續(xù)的IT成本。企業(yè)需要知道如何在盡量壓縮開支的情況下從大數(shù)據(jù)中獲取盡可能多的價(jià)值。
他們必須能夠擴(kuò)展基礎(chǔ)架構(gòu)以管理大數(shù)據(jù),同時(shí)降低IT成本。這正是云服務(wù)所能夠幫助企業(yè)做到的。云服務(wù)消除了企業(yè)采購(gòu)和維護(hù)硬件和軟件基礎(chǔ)設(shè)施的需要,以及與之相關(guān)的大量資本支出。進(jìn)而使得企業(yè)得以能夠?qū)⒂邢薜馁Y金重新分配到其核心創(chuàng)新中。
3、難以預(yù)測(cè)的市場(chǎng)
大數(shù)據(jù)來自各種各樣的來源,從企業(yè)傳統(tǒng)遺留應(yīng)用程序和交易系統(tǒng)到由機(jī)器、移動(dòng)設(shè)備、網(wǎng)絡(luò)日志和社交媒體生成的數(shù)據(jù)。這使得預(yù)測(cè)所需容量變得更加困難和低效。單個(gè)事件可能會(huì)導(dǎo)致數(shù)據(jù)量和工作量的突然變化。例如,一家金融服務(wù)機(jī)構(gòu)在任何一天都可能會(huì)經(jīng)歷10倍的數(shù)量波動(dòng),而具體的波動(dòng)則取決于市場(chǎng)狀況,是很難預(yù)測(cè)的。
四分之一的企業(yè)受到大數(shù)據(jù)對(duì)存儲(chǔ)容量/基礎(chǔ)設(shè)施日益增長(zhǎng)的需求的挑戰(zhàn)。企業(yè)不僅需要規(guī)劃基礎(chǔ)架構(gòu),還必須確定如何輕松擴(kuò)展,以滿足不斷變化的存儲(chǔ)和計(jì)算要求。對(duì)于幾乎任何企業(yè)來說,將其基礎(chǔ)架構(gòu)容量規(guī)模擴(kuò)展10倍來支持峰值需求,讓這些額外的容量在90%的時(shí)間內(nèi)均處于閑置狀態(tài),無疑是非常低效且不符合成本效益的。其他問題包括由于數(shù)據(jù)的增長(zhǎng)所導(dǎo)致的基礎(chǔ)設(shè)施和維護(hù)成本不斷升高,還需通過實(shí)驗(yàn)來確保足夠的帶寬來支持創(chuàng)新,以及數(shù)據(jù)采集和分析的成本。
借助云服務(wù),企業(yè)無需為最大容量調(diào)整其基礎(chǔ)架構(gòu)的規(guī)模大小。其彈性屬性使企業(yè)可以根據(jù)需要實(shí)現(xiàn)動(dòng)態(tài)擴(kuò)展或縮減基礎(chǔ)架構(gòu)。
4、安全、合規(guī)方面的挑戰(zhàn)
隨著企業(yè)收集、存儲(chǔ)和分析來自新的和現(xiàn)有來源的越來越多的數(shù)據(jù)信息,數(shù)據(jù)的安全性變得更受關(guān)注。接近35%的受訪者表示不確定或不認(rèn)為他們所在企業(yè)現(xiàn)有的安全解決方案和產(chǎn)品提供了足夠的數(shù)據(jù)安全性。企業(yè)正在努力的控制數(shù)據(jù)訪問,保護(hù)數(shù)據(jù)資產(chǎn)和保護(hù)基礎(chǔ)設(shè)施。最終,企業(yè)需要決定如何確保符合合規(guī)性、數(shù)據(jù)管理和安全性的要求,而又不會(huì)影響到靈活敏捷性和性能。例如,金融服務(wù)公司所創(chuàng)造或使用的所有數(shù)據(jù)基本上都是受監(jiān)管的,可能是敏感的或私人的數(shù)據(jù)信息,企業(yè)需要考慮其財(cái)務(wù)信息是否有著嚴(yán)格的管理和合規(guī)要求。
大數(shù)據(jù)也意味著您企業(yè)的信息并不是閑置狀態(tài),這些數(shù)據(jù)不斷被多個(gè)用戶和系統(tǒng)生成、處理和分析,以獲取更好的業(yè)務(wù)結(jié)果。即使是大數(shù)據(jù)安全方面的挑戰(zhàn),也可以通過選擇具有強(qiáng)大數(shù)據(jù)隱私保護(hù)和安全控制能力的供應(yīng)商來解決。事實(shí)上,云服務(wù)比企業(yè)自有數(shù)據(jù)中心更安全并不罕見。由于云服務(wù)提供商正在提供強(qiáng)大的計(jì)算基礎(chǔ)架構(gòu),因此保持安全的環(huán)境符合他們的最大利益。為此,許多云提供商已經(jīng)積累了來自多家企業(yè)的最佳實(shí)踐方案和經(jīng)驗(yàn),并具有最嚴(yán)格的安全要求。
5、創(chuàng)建一個(gè)商業(yè)案例
在很多情況下,IT部門需要為大數(shù)據(jù)創(chuàng)建商業(yè)案例。據(jù)IDG稱,企業(yè)的IT負(fù)責(zé)人比非IT負(fù)責(zé)人更有可能負(fù)責(zé)確定需求和解決方案方面的業(yè)務(wù)需求。他們需要推薦和選擇供應(yīng)商,批準(zhǔn)和授權(quán)采購(gòu),并在IT團(tuán)隊(duì)之外銷售解決方案。但企業(yè)業(yè)務(wù)部門的領(lǐng)導(dǎo)也并不能置身事外。IDG表示,45%的受訪者表示其首席執(zhí)行官參與了大數(shù)據(jù)項(xiàng)目的制定實(shí)施。首席財(cái)務(wù)官和業(yè)務(wù)線主管們也越來越多地在大數(shù)據(jù)項(xiàng)目中發(fā)揮關(guān)鍵作用。
如果你企業(yè)還沒有建立起一個(gè)穩(wěn)定的商業(yè)案例,并收集來自強(qiáng)大的盟友,如關(guān)鍵業(yè)務(wù)利益相關(guān)者的意見,那么你企業(yè)很可能不會(huì)獲得大數(shù)據(jù)項(xiàng)目所需資源的批準(zhǔn)。為了針對(duì)具體的項(xiàng)目舉措進(jìn)行實(shí)驗(yàn),企業(yè)必須做出無差別的繁重工作,這需要花費(fèi)大量的時(shí)間和精力。這無疑會(huì)放慢創(chuàng)新的步伐,最終降低大數(shù)據(jù)項(xiàng)目的價(jià)值。
在許多情況下,證明投資回報(bào)最簡(jiǎn)單的方法是降低總體擁有成本。使用云服務(wù)重新構(gòu)建現(xiàn)有工作負(fù)載可幫助企業(yè)顯著的降低成本。另外,利用云服務(wù)還可以通過降低實(shí)驗(yàn)成本來加速創(chuàng)新的步伐。成功的實(shí)驗(yàn)將顯示出可衡量的效益,一旦到位,將激發(fā)更多的需求。
正確的云計(jì)算方法有助于最大限度地減少部署大數(shù)據(jù)應(yīng)用程序的障礙,甚至消除部分障礙。像大數(shù)據(jù)一樣,云服務(wù)是具有高度顛覆性的一大力量,其正在改變企業(yè)的運(yùn)作方式和經(jīng)營(yíng)方式。而如果將云和大數(shù)據(jù)結(jié)合起來,其影響就更大了。
但決定采用云服務(wù)也并不能在一夜之間就能夠解決企業(yè)的大數(shù)據(jù)問題。許多云服務(wù)提供商僅僅只提供了企業(yè)所需服務(wù)的一部分,企業(yè)仍需進(jìn)行大量的整合,這往往又會(huì)面臨一些取舍,價(jià)格還是可擴(kuò)展性?性能還是易用性?靈活敏捷還是安全性?因此,在評(píng)估云提供商時(shí),企業(yè)需要尋找可以直接解決這些挑戰(zhàn)的解決方案。
技能短缺:
您企業(yè)需要廣泛的功能來構(gòu)建、擴(kuò)展和安全部署大數(shù)據(jù)應(yīng)用程序。這些功能應(yīng)涵蓋大數(shù)據(jù)的所有不同方面,從數(shù)據(jù)收集到存儲(chǔ)、分析和數(shù)據(jù)可視化。企業(yè)應(yīng)該尋找能夠提供托管服務(wù)的云提供商,以盡量減少管理開銷,并能夠與大數(shù)據(jù)中廣泛的技術(shù)充分兼容。這將使您企業(yè)能夠充分利用您擁有的技能,并獲得幫助。
成本和商業(yè)案例的制定:
企業(yè)遷移到云服務(wù)將無需采購(gòu)和維護(hù)硬件。為了幫助構(gòu)建商業(yè)案例,請(qǐng)選擇一家可以幫助降低TCO的提供商。靈活的定價(jià)模式:從預(yù)留實(shí)例(Reserved Instance)到按需實(shí)例(On-demand Instance),甚至是競(jìng)價(jià)實(shí)例(Spot Instance)都可以提供巨大的節(jié)省機(jī)會(huì),降低管理和處理數(shù)據(jù)的成本結(jié)構(gòu)。
數(shù)據(jù)的不可預(yù)測(cè)性:
您企業(yè)的云服務(wù)提供商應(yīng)該允許您快速輕松地進(jìn)行擴(kuò)展或縮減以響應(yīng)需求的變化。例如,將存儲(chǔ)從計(jì)算容量中分離出來,使企業(yè)只選擇他們所需要的資源類型和規(guī)模大小,并只支付他們所使用的資源。
安全性:
尋找一款云計(jì)算基礎(chǔ)設(shè)施,旨在保證安全,并經(jīng)常審核其是否符合各種行業(yè)標(biāo)準(zhǔn)。確保云提供商提供適合審計(jì)的服務(wù)和合規(guī)計(jì)劃,以幫助您企業(yè)滿足安全和管理要求。并確保提供商提供所有服務(wù)的靜態(tài)和傳輸數(shù)據(jù)加密,以及廣泛的數(shù)據(jù)加密選項(xiàng)。
云服務(wù)的本質(zhì)使其非常適合大數(shù)據(jù)。由于云計(jì)算的可擴(kuò)展性,彈性和經(jīng)濟(jì)模型,可以讓企業(yè)根據(jù)需要進(jìn)行規(guī)?;s放,而無需在高峰容量的環(huán)境中構(gòu)建和投資。云計(jì)算使企業(yè)能夠降低與繁重工作相關(guān)的成本,而將節(jié)省的資金再投資于能夠?yàn)槠髽I(yè)提供價(jià)值的項(xiàng)目??珊饬康墓?jié)省將有助于獲得更多的贊助商,而這些節(jié)余可以用來資助其他大數(shù)據(jù)項(xiàng)目。
展望未來,大數(shù)據(jù)將在幫助企業(yè)做出更明智、更快速的業(yè)務(wù)決策方面發(fā)揮越來越重要的作用。 但是,企業(yè)不必因技能短缺,成本有限,數(shù)據(jù)的不可預(yù)測(cè)性,安全問題或創(chuàng)建商業(yè)案例方面的困難而受到阻礙。云服務(wù),可以解決許多這些要求。其使得使企業(yè)能夠迭代大數(shù)據(jù)分析,專注于業(yè)務(wù)需求,而無需擔(dān)心收集、存儲(chǔ)和處理大數(shù)據(jù)所需的IT基礎(chǔ)架構(gòu)。借助由云服務(wù)供應(yīng)商所提供的解決方案,企業(yè)可以以更快,更低的成本來分析數(shù)據(jù),從而更快地實(shí)現(xiàn)業(yè)務(wù)目標(biāo)。
(原標(biāo)題:未來三到五年,云計(jì)算將成企業(yè)大數(shù)據(jù)業(yè)務(wù)發(fā)展核心推動(dòng)因素)