根據(jù)分析機構(gòu)Statista公司的預(yù)測,2018年的數(shù)據(jù)中心存儲容量將達(dá)到1.45澤字節(jié),到2021年將增長到2.3澤字節(jié)??梢哉f這是很龐大的數(shù)據(jù),而且增長很快。在商業(yè)存儲領(lǐng)域,數(shù)據(jù)增長推動了所有存儲介質(zhì)的容量和性能的發(fā)展。它還促進(jìn)了旨在管理所有數(shù)據(jù)的軟件工具的開發(fā),其中包括從非結(jié)構(gòu)化數(shù)據(jù)中挖掘商業(yè)價值,并保持合規(guī)性。
企業(yè)數(shù)據(jù)存儲發(fā)生了什么?
要了解當(dāng)今企業(yè)數(shù)據(jù)存儲市場的情況,需要了解一下影響數(shù)據(jù)存儲的主要趨勢:
1.分層存儲仍然是重中之重
隨著企業(yè)將主要數(shù)據(jù)存儲在機械(HDD)硬盤上,并將備份數(shù)據(jù)存儲到磁帶,存儲分層已經(jīng)存在數(shù)十年的時間。分層存儲已經(jīng)變得更加復(fù)雜,但其原理仍然一樣。
企業(yè)在SSD硬盤上提取活動數(shù)據(jù),并在SSD硬盤或高性能硬盤上進(jìn)行處理,然后使用高容量HDD硬盤移動到近線存儲。此層可能位于相同的存儲系統(tǒng)上或位于數(shù)據(jù)中心內(nèi)。通常將老化但仍然活躍的數(shù)據(jù)歸檔到活躍存檔磁帶或熱數(shù)據(jù)層,并將備份和長期存檔存儲到非現(xiàn)場磁帶或基于云計算的冷存儲中。
2. SSD硬盤在商業(yè)領(lǐng)域的應(yīng)用不斷增長
在商業(yè)市場上,NAND閃存具有很高的耐用性和性能,特別適用于高事務(wù)、低延遲的業(yè)務(wù)應(yīng)用。
SSD硬盤在混合陣列中填充全閃存存儲陣列和0級和1級存儲陣列。調(diào)查機構(gòu)IDC公司報告表明,企業(yè)全閃存陣列市場在2017年第一季度增長了75.7%,其市場收入達(dá)到14億美元?;旌闲烷W存銷售額更是高達(dá)20億美元,這些銷售在2017年底和2018年繼續(xù)增長。
閃存產(chǎn)品比HDD硬盤更加昂貴,但這種差距正在迅速縮小。二者的價格差距在一段時間以來一直在縮小,閃存的容量比硬盤驅(qū)動器的容量更高,并且它提供了更高的性能與容量價值(目前世界上容量最大的存儲媒質(zhì)不是機械硬盤,而是SSD硬盤)。閃存產(chǎn)品開發(fā)人員仍然關(guān)注單位成本更低、容量更大的存儲單元,而存儲級內(nèi)存(SCM)非易失性存儲器的進(jìn)步顯著降低了應(yīng)用程序的延遲。
3. HDD硬盤還有發(fā)展空間
盡管SSD硬盤的應(yīng)用越來越廣泛,但HDD(機械)硬盤并不會消亡。HDD硬盤供應(yīng)商通過增加磁盤密度,并將更多磁頭和磁盤裝入單個驅(qū)動器來提高存儲容量。
雖然固態(tài)硬盤正在努力縮小價格差距,但其平均成本仍然比SSD硬盤高出6.6倍。雖然SSD硬盤的價格全線下調(diào),但I(xiàn)DC公司預(yù)測,2021年機械硬盤的價格仍比固態(tài)硬盤低2.2倍。
分層存儲針對混合存儲媒質(zhì)進(jìn)行了優(yōu)化,HDD硬盤在閃存和磁帶之間構(gòu)成了一個巨大的媒質(zhì)扇區(qū)。HDD硬盤的高容量、可靠性、快速性能和經(jīng)濟(jì)性將繼續(xù)成為這種組合的一部分。
4.磁帶不會消亡
磁帶已不再是通用的存儲產(chǎn)品,但它對于數(shù)據(jù)存檔和長期的備份保留和存檔具有重要意義。
云端冷存儲層越來越受歡迎,但許多活躍的存檔環(huán)境都保留在本地部署的設(shè)施中,以確保具有足夠的帶寬。在基于磁盤的存儲系統(tǒng)上,許多磁帶部署也更加高效。龐大的磁盤庫占用大量的空間和能源,而大多數(shù)磁帶庫和驅(qū)動器體積較小,占用空間、散熱和電力更少。而磁帶介質(zhì)的成本僅為SSD硬盤和HDD硬盤存儲成本的一小部分。
說到磁帶介質(zhì),線性磁帶開放(LTO)技術(shù)聯(lián)盟在LTO開發(fā)路線圖上做了很好的工作,并保持了LTO磁帶制造商之間的互操作性。而每代磁帶產(chǎn)品的容量都在增加,IBM公司的下一代磁帶驅(qū)動器正在使用TMR(隧道磁阻)來進(jìn)一步提高容量。
5.云計算促進(jìn)存儲發(fā)展
云計算是數(shù)據(jù)存儲獲得高增長的更大機會,但是不同的模型提供不同的存儲需求。當(dāng)組織決定將應(yīng)用程序或數(shù)據(jù)存儲到云端時,組織應(yīng)該知道它們之間的區(qū)別。
私有云是內(nèi)部部署的唯一租戶的云環(huán)境,通常位于主數(shù)據(jù)中心。該環(huán)境運行云編排服務(wù),并允許企業(yè)在其防火墻后使用云計算設(shè)施。
混合云和多云。這兩種云服務(wù)有所不同:混合云協(xié)調(diào)多個云之間的服務(wù),而多云策略僅僅意味著企業(yè)在其投資組合中保留多個云服務(wù)?;旌显茖崿F(xiàn)不同云服務(wù)之間的某種級別的集成和協(xié)調(diào),例如將客戶的私有云與供應(yīng)商所有的云服務(wù)集成。大型混合云包括SAP和IBM公司擁有的公共云,他們將客戶私有云的內(nèi)部部署服務(wù)擴展到自己的私有云。
公共云是多租戶云,可用于各種工作負(fù)載和用例。在這里將公共云劃分為兩種類型:超大型公共云供應(yīng)商和定制云服務(wù)提供商(CSP)。超大規(guī)模公共云供應(yīng)商是AWS、Azure和Google等云計算巨頭。他們以全球影響力和可擴展性而聞名,他們支持多種計算環(huán)境,其中包括長期數(shù)據(jù)存儲、SaaS、PaaS、IaaS部署。
定制云服務(wù)提供商(CSP)提供的是專用的公共云服務(wù),可用于不同的客戶使用案例。這些案例可能因地理位置、垂直行業(yè)、數(shù)據(jù)工作量而不同。盡管它們是一種公有云,但它們不同于專注于超大規(guī)模的公共云。他們的競爭優(yōu)勢通常是他們的專業(yè)重點、客戶服務(wù),以及與客戶的靈活服務(wù)等級協(xié)議(SLA)。
6.非結(jié)構(gòu)化的數(shù)據(jù)管理和分析
非結(jié)構(gòu)化數(shù)據(jù)代表企業(yè)中存儲的大部分?jǐn)?shù)據(jù)達(dá)到85%以上。由于這些數(shù)據(jù)迅速老化,在1至3個月內(nèi),這些非結(jié)構(gòu)化數(shù)據(jù)中的大部分都在輔助系統(tǒng)和冷存儲庫中。
問題在于,大部分?jǐn)?shù)據(jù)都具有商業(yè)價值,但定位和提取數(shù)據(jù)可能非常困難。開發(fā)人員正在使用數(shù)據(jù)管理和分析工具進(jìn)行響應(yīng),以便企業(yè)用戶從非結(jié)構(gòu)化數(shù)據(jù)中獲取可操作的情報。
非結(jié)構(gòu)化數(shù)據(jù)管理工具發(fā)現(xiàn)并智能地處理非結(jié)構(gòu)化數(shù)據(jù)。例如,分類軟件在各種存儲系統(tǒng)上發(fā)現(xiàn)非結(jié)構(gòu)化數(shù)據(jù),并通過元數(shù)據(jù)、內(nèi)容和場景對其進(jìn)行分析。然后,軟件執(zhí)行策略驅(qū)動的操作,如防御性刪除,以及將數(shù)據(jù)移動到支持非結(jié)構(gòu)化數(shù)據(jù)分析的存儲中。
7.治理和合規(guī)性
治理和合規(guī)性要求對企業(yè)的存儲決策產(chǎn)生深遠(yuǎn)影響。IT部門有責(zé)任與業(yè)務(wù)部門和法律部門密切合作,了解SOX和HIPPA等法規(guī)的數(shù)據(jù)合規(guī)性要求,并充分保護(hù)個人身份信息(PII)。
此外,在歐洲開展業(yè)務(wù)的企業(yè)需要嚴(yán)格遵守歐盟的“通用數(shù)據(jù)保護(hù)條例”(GDPR)。新法規(guī)將影響數(shù)據(jù)保留、歸檔和存儲架構(gòu),并對違規(guī)的公司進(jìn)行嚴(yán)厲的懲罰。這些企業(yè)正在尋求他們的IT部門、內(nèi)部遵守流程,以及他們的云計算提供商和業(yè)務(wù)伙伴盡可能遵守這個監(jiān)管法規(guī)。
這不僅僅是外部法規(guī)正在施加壓力。上市公司有義務(wù)調(diào)查欺詐和企業(yè)間諜活動,甚至私營公司也需要對不良行為者保持警惕。這些企業(yè)正在投資合規(guī)軟件工具,這些工具在電子郵件和社交媒體上對模式識別和消息提示起到重要的作用。
數(shù)據(jù)存儲的發(fā)展趨勢
數(shù)據(jù)存儲方面存在許多影響企業(yè)發(fā)展的技術(shù)趨勢,如人工智能、機器學(xué)習(xí)、物聯(lián)網(wǎng)、軟件定義存儲、對象存儲、超融合等。
這些技術(shù)趨勢促進(jìn)了商業(yè)世界的發(fā)展。但記住這一點:沒有什么事情會在一夜之間發(fā)生。如果企業(yè)跟上了數(shù)據(jù)存儲的發(fā)展趨勢,并理解了業(yè)務(wù)的技術(shù)需求,那么企業(yè)可以在業(yè)務(wù)方面做好準(zhǔn)備時采用新技術(shù)。