當(dāng)前,隨著三網(wǎng)融合推進(jìn),電信IPTV和互聯(lián)網(wǎng)OTT業(yè)務(wù)取得了快速發(fā)展,導(dǎo)致各地DVB數(shù)字電視業(yè)務(wù)退訂和用戶離網(wǎng)率有不同程度增加;另外,用戶電視消費(fèi)行為也正在發(fā)生一系列變化:用戶收視時(shí)間的碎片化轉(zhuǎn)變,接收終端從單一的電視機(jī)/STB發(fā)展到手機(jī)、PC、PAD、電視一體機(jī)等多元化終端,喜好內(nèi)容從標(biāo)清轉(zhuǎn)移到高清乃至4K超高清……貴州是全國(guó)率先完成一省一網(wǎng)全面整合的省份之一,作為全省數(shù)字電視運(yùn)營(yíng)主體,貴州省廣播電視信息網(wǎng)絡(luò)股份有限公司(以下簡(jiǎn)稱“貴廣網(wǎng)絡(luò)”)目前擁有有線數(shù)字電視用戶超過(guò)600余萬(wàn)戶,其中高清互動(dòng)電視用戶超過(guò)200萬(wàn)戶,寬帶用戶超過(guò)70萬(wàn)戶。2016年12月,貴廣網(wǎng)絡(luò)在上海證券交易所成功上市,成為貴州文化產(chǎn)業(yè)“第一股”。
一、全媒體業(yè)務(wù)轉(zhuǎn)型帶來(lái)巨大挑戰(zhàn)
面對(duì)行業(yè)競(jìng)爭(zhēng)和用戶電視消費(fèi)行為的轉(zhuǎn)變,貴廣網(wǎng)絡(luò)在確保正確的輿論導(dǎo)向基礎(chǔ)上,基于已完成雙向改造的HFC網(wǎng)絡(luò),計(jì)劃面向多終端發(fā)展全媒體、全業(yè)務(wù)運(yùn)營(yíng)能力,屆時(shí),可為用戶提供直播、時(shí)移、回看、點(diǎn)播、4K、多屏互動(dòng)、視頻通訊、集客業(yè)務(wù)等跨平臺(tái)、跨系統(tǒng)的融合業(yè)務(wù),以此不斷提升用戶體驗(yàn),提高用戶ARPU值。
在此業(yè)務(wù)策略驅(qū)動(dòng)下,為了增強(qiáng)DVB數(shù)字電視業(yè)務(wù)的競(jìng)爭(zhēng)力,讓電視互聯(lián)網(wǎng)化,局方計(jì)劃將錄制保存的直播節(jié)目以及其他第三方內(nèi)容,經(jīng)過(guò)再加工和編輯,利用互聯(lián)網(wǎng)技術(shù)向省內(nèi)200多萬(wàn)高清互動(dòng)電視機(jī)頂盒、PC終端及手機(jī)、PAD等移動(dòng)用戶終端進(jìn)行分發(fā)和推送。
在上述業(yè)務(wù)之外,局方目前每年還在生產(chǎn)PB級(jí)海量數(shù)據(jù),這一切對(duì)NAS的帶寬和文件數(shù)量處理能力都帶來(lái)了巨大挑戰(zhàn)。
一方面,NAS存在著元數(shù)據(jù)瓶頸,海量并發(fā)訪問(wèn) I/O 效率以及海量文件檢索效率都非常低;另一方面,后期擴(kuò)容困難,很難突破10PB級(jí);再者,廣電推流業(yè)務(wù)需求基于 HTTP 協(xié)議,需要部署專門的 Web 服務(wù)器。廣電業(yè)務(wù)存儲(chǔ)架構(gòu)由NAS向S3對(duì)象存儲(chǔ)轉(zhuǎn)型勢(shì)在必行。
二、為什么是對(duì)象存儲(chǔ)
對(duì)象存儲(chǔ)作為一種云計(jì)算環(huán)境下新型的存儲(chǔ)形態(tài),相比文件存儲(chǔ),具有更低的成本、更高的擴(kuò)展性、更簡(jiǎn)易的管理操作和高可用性等優(yōu)勢(shì),尤其適合用來(lái)存儲(chǔ)和管理海量的非結(jié)構(gòu)化數(shù)據(jù)。貴廣網(wǎng)絡(luò)經(jīng)過(guò)對(duì)比分析,決定采用對(duì)象存儲(chǔ)來(lái)滿足高速發(fā)展的業(yè)務(wù)需要。
2016年6月,XSKY分布式海量對(duì)象存儲(chǔ)方案X-EOS搭配Cisco UCS 3260高密度大容量服務(wù)器,開始入駐貴廣網(wǎng)絡(luò)進(jìn)行部署前測(cè)試。在長(zhǎng)達(dá)半年的測(cè)試過(guò)程中,產(chǎn)品保持了穩(wěn)定運(yùn)行,各項(xiàng)技術(shù)指標(biāo)均達(dá)到局方要求。今年1月份,X-EOS正式獲得PB級(jí)部署生產(chǎn)許可,而隨著局方業(yè)務(wù)的發(fā)展,在今年5月和9月份又分別兩次進(jìn)行了生產(chǎn)擴(kuò)容,至此,在1年多時(shí)間里X-EOS穩(wěn)定支撐單池近10PB超大規(guī)模應(yīng)用。
業(yè)務(wù)邏輯圖
對(duì)于廣電運(yùn)營(yíng)商來(lái)說(shuō),在收視費(fèi)之外,還需要依靠大量的廣告業(yè)務(wù)來(lái)支撐業(yè)務(wù)發(fā)展,為了加速局方廣告業(yè)務(wù)以及m3u8視頻索引等小文件的讀取,X-EOS通過(guò)SSD加速小文件讀取,并采用小文件歸并技術(shù)使業(yè)務(wù)性能及SSD容量成本達(dá)到完美平衡。
保證輿論導(dǎo)向正確是廣電運(yùn)營(yíng)商的首要任務(wù),為了快速識(shí)別和定位已保存的海量節(jié)目,從而達(dá)到節(jié)目的甄別、刪除或移除操作目的,X-EOS為局方提供了全局檢索與根據(jù)數(shù)據(jù)前綴搜索等特色功能,確保運(yùn)營(yíng)商針對(duì)特定時(shí)期或者特別內(nèi)容目標(biāo),保留快速操作的手段。
X-EOS還提供了自帶負(fù)載均衡功能,有效減少存儲(chǔ)服務(wù)器資源的浪費(fèi),為局方實(shí)現(xiàn)了存儲(chǔ)資源利用的最大化;此外,XSKY還協(xié)助局方改造推流業(yè)務(wù)平臺(tái),使其支持S3接口,構(gòu)建私有云S3集群,以支撐上百個(gè)頻道的高帶寬訪問(wèn)。
三、全面向S3對(duì)象存儲(chǔ)轉(zhuǎn)型
隨著系統(tǒng)的長(zhǎng)期穩(wěn)定運(yùn)行和高性能表現(xiàn),更加堅(jiān)定了局方由NAS向分布式軟件定義對(duì)象存儲(chǔ)的遷移決心。截至目前,XSKY在保障新系統(tǒng)穩(wěn)定運(yùn)行同時(shí),已同步協(xié)助局方將原來(lái)NAS中超過(guò)200TB數(shù)據(jù)順利實(shí)現(xiàn)了遷移,而余下的數(shù)據(jù)遷移工作也正在進(jìn)行中。
XSKY軟件定義對(duì)象存儲(chǔ)解決方案,完美的支撐了貴廣網(wǎng)絡(luò)面向三網(wǎng)融合的全業(yè)務(wù)運(yùn)營(yíng)需求,在性能滿足的同時(shí)降低了硬件資源投入,并為局方未來(lái)業(yè)務(wù)的發(fā)展預(yù)留了高可擴(kuò)展性。基于軟件定義的對(duì)象存儲(chǔ)解決方案,為貴廣網(wǎng)絡(luò)乃至全國(guó)的廣電運(yùn)營(yíng)商向全媒體運(yùn)營(yíng)商轉(zhuǎn)型,提供了積極的借鑒意義與價(jià)值:
(1) 支持通用 X86 標(biāo)準(zhǔn)化的服務(wù)器平臺(tái),同等硬件配置性能達(dá)到最優(yōu);
(2) 跨服務(wù)器廠商平臺(tái)整合完美,輕松突破10PB級(jí)別(200臺(tái));
(3) 圖形化界面,運(yùn)維簡(jiǎn)單;
(4) 與廣電第三方平臺(tái)提供商高度集成,共同對(duì)接開發(fā)應(yīng)用和存儲(chǔ)層,根據(jù)應(yīng)用需求定制開發(fā)廣電特有的特性;
(5) S3 接口協(xié)議支持豐富,兼容標(biāo)準(zhǔn)S3協(xié)議,并可根據(jù)應(yīng)用開發(fā)需求提供定制化開發(fā),擴(kuò)展S3協(xié)議;
(6) 面向S3 提供基于域名的負(fù)載均衡策略,拉流和推流均輕松支持;
(7) 全局文件檢索、生命周期管理、對(duì)象反查、小文件歸并、按池級(jí)擴(kuò)容等功能高度迎合廣電業(yè)務(wù)特點(diǎn)。