一年一度的全球購(gòu)物狂歡節(jié)“雙十一”已經(jīng)完美收官，天貓、京東等電商廠家都賺的盆缽滿(mǎn)載，雙十一的戰(zhàn)績(jī)又刷新去年的記錄。那么大家想下，雙十一期間那么多消費(fèi)者下單，流量爆增，為什么網(wǎng)絡(luò)沒(méi)有癱瘓？“網(wǎng)易能夠做到成功應(yīng)對(duì)網(wǎng)易嚴(yán)選、網(wǎng)易考拉海購(gòu)雙11大促期間的海量流量，云基礎(chǔ)服務(wù)功不可沒(méi)。”陳諤說(shuō)道雙十一是全民消費(fèi)的狂歡，也是電商行業(yè)的一次大考。前臺(tái)的策劃和運(yùn)營(yíng)、后臺(tái)的計(jì)算能力和響應(yīng)能力等都直接關(guān)系著這場(chǎng)考試的成敗。
雙十一當(dāng)天，電商瞬間涌入的流量是平時(shí)狀態(tài)的數(shù)百倍甚至千倍。
網(wǎng)易云基礎(chǔ)服務(wù)（蜂巢）總經(jīng)理陳諤對(duì)億邦動(dòng)力網(wǎng)說(shuō)，雙十一對(duì)爆發(fā)性流量的支撐，看起來(lái)是怎么去擴(kuò)資源，實(shí)則對(duì)于電商企業(yè)的IT基礎(chǔ)架構(gòu)、軟件架構(gòu)和運(yùn)維等綜合能力都是嚴(yán)峻的考驗(yàn)——后臺(tái)系統(tǒng)不但要保證在壓力下不會(huì)癱瘓，還要保證高并發(fā)下?lián)屬?gòu)邏輯的正確性。
“網(wǎng)易云基礎(chǔ)服務(wù)針對(duì)電商業(yè)務(wù)峰值頻發(fā)的特點(diǎn)，配置了容器集群、負(fù)載均衡、緩存Redis集群、CDN、彈性伸縮等功能，優(yōu)化提升了數(shù)據(jù)查詢(xún)性能。”陳諤介紹道，“網(wǎng)易能夠做到成功應(yīng)對(duì)網(wǎng)易嚴(yán)選、網(wǎng)易考拉海購(gòu)雙11大促期間的海量流量，云基礎(chǔ)服務(wù)功不可沒(méi)。”他說(shuō)道。
雙十一是對(duì)電商后臺(tái)能力的綜合考驗(yàn)。但電商大促，究竟需要哪些基礎(chǔ)能力？帶著疑問(wèn)，億邦動(dòng)力網(wǎng)與網(wǎng)易云基礎(chǔ)服務(wù)、網(wǎng)易七魚(yú)云客服、考拉反作弊運(yùn)營(yíng)各自的負(fù)責(zé)人進(jìn)行了深入的交流，探討了網(wǎng)易云和網(wǎng)易七魚(yú)都運(yùn)用了哪些技術(shù)和服務(wù)來(lái)保障此次雙十一。
一、通信可助力社交電商
在技術(shù)的推動(dòng)下，電商步入多元化創(chuàng)新的新階段。場(chǎng)景化、社區(qū)化的購(gòu)物模式已成趨勢(shì)，移動(dòng)社交、短視頻等功能為電商模式創(chuàng)新帶來(lái)了新的機(jī)遇。
在網(wǎng)易云通信與視頻解決方案總監(jiān)劉兵看來(lái)，社交電商如要發(fā)掘更大潛力，需要更具互動(dòng)性的功能加持。短視頻作為新型的溝通和展示方式，為電商帶來(lái)了想象空間。直播方面，網(wǎng)易云研發(fā)的頻解決方案可提供短視頻拍攝和編輯、參數(shù)自定義、云服務(wù)、自動(dòng)化鑒黃、音視頻編解碼技術(shù)和解決方案等。
二、反作弊
在電商的營(yíng)銷(xiāo)計(jì)劃中，企業(yè)為了拉新、促銷(xiāo)、宣傳等商業(yè)目標(biāo)，會(huì)發(fā)起各種面向消費(fèi)者的優(yōu)惠活動(dòng)。但除了正常消費(fèi)者得到了這些優(yōu)惠之外，還有一群專(zhuān)業(yè)的薅羊毛組織、職業(yè)“地下黨”，專(zhuān)門(mén)選擇互聯(lián)網(wǎng)公司的優(yōu)惠營(yíng)銷(xiāo)活動(dòng)集中參與，導(dǎo)致本屬于消費(fèi)者的優(yōu)惠落入羊毛黨的口袋。
考拉反作弊運(yùn)營(yíng)負(fù)責(zé)人趙紅程闡述了這些職業(yè)“羊毛黨”給電商公司帶來(lái)的危害：既會(huì)導(dǎo)致電商公司的巨額營(yíng)銷(xiāo)費(fèi)用被一部分人攫取，也會(huì)由于不好的用戶(hù)體驗(yàn)導(dǎo)致用戶(hù)流失。為了保障商家和消費(fèi)者的共同利益，不少電商平臺(tái)都已經(jīng)采取了有效的反作弊及云安全產(chǎn)品。
“目前考拉海購(gòu)的反作弊系統(tǒng)對(duì)于風(fēng)險(xiǎn)訂單的識(shí)別主要基于規(guī)則引擎，同時(shí)結(jié)合用戶(hù)畫(huà)像評(píng)分、關(guān)聯(lián)網(wǎng)絡(luò)模型和業(yè)務(wù)名單庫(kù)等檢測(cè)手段”，網(wǎng)易云安全CTO朱浩齊介紹到，“網(wǎng)易云安全的反作弊系統(tǒng)通過(guò)構(gòu)建規(guī)則引擎，并結(jié)合用戶(hù)畫(huà)像、關(guān)聯(lián)網(wǎng)絡(luò)模型以及各業(yè)務(wù)的名單庫(kù)，可以做到對(duì)羊毛黨囤貨行為的識(shí)別，幫助電商公司合理減損。”
三、智能客服
客服領(lǐng)域的智能回復(fù)和智能管理在今年雙十一扮演了重要角色。
據(jù)介紹，網(wǎng)易七魚(yú)（智能云客服）的“一觸即達(dá)”服務(wù)可基于人工智能、機(jī)器學(xué)習(xí)等技術(shù)，能夠猜測(cè)問(wèn)題、智能提醒、主動(dòng)提問(wèn)，也能夠根據(jù)用戶(hù)的使用習(xí)慣、行為軌跡等提前做好準(zhǔn)備，做到“猜你想問(wèn)”。
四、電商大數(shù)據(jù)
據(jù)悉，考拉海購(gòu)在雙11期間有一塊有數(shù)大屏幕實(shí)時(shí)展示當(dāng)前最新的銷(xiāo)售總額、每個(gè)商品品類(lèi)的銷(xiāo)售比例、訂單增長(zhǎng)趨勢(shì)、活躍用戶(hù)地理位置等多維信息。每個(gè)用戶(hù)每筆訂單所產(chǎn)生的影響都會(huì)實(shí)時(shí)更新到大屏上。
談及數(shù)據(jù)計(jì)算，無(wú)外乎數(shù)據(jù)輸入→計(jì)算→數(shù)據(jù)輸出。傳統(tǒng)的計(jì)算模型，以數(shù)據(jù)庫(kù)為例，是先將數(shù)據(jù)存儲(chǔ)在一個(gè)數(shù)據(jù)表中，用戶(hù)通過(guò)執(zhí)行查詢(xún)語(yǔ)句觸發(fā)數(shù)據(jù)庫(kù)的計(jì)算操作，最后數(shù)據(jù)庫(kù)完成計(jì)算后輸出結(jié)果。網(wǎng)易方面表示，這種“先存后算”的模型在大數(shù)據(jù)實(shí)時(shí)計(jì)算場(chǎng)景下是行不通的。所要計(jì)算的數(shù)據(jù)很“大”，一個(gè)計(jì)算結(jié)果所涉及的源數(shù)據(jù)可能是涵蓋過(guò)往一天的數(shù)據(jù)，可能是上千億條數(shù)據(jù)記錄。如果每增加一些新數(shù)據(jù)，都把所有數(shù)據(jù)都重新計(jì)算一遍，這樣的開(kāi)銷(xiāo)是非常大的，最終的效果會(huì)是很“慢”，達(dá)不到實(shí)時(shí)的效果。比較合理的做法是“邊算邊存”，數(shù)據(jù)進(jìn)入實(shí)時(shí)計(jì)算系統(tǒng)后，不一定需要先存儲(chǔ)起來(lái)，可以直接參與計(jì)算，而且這里的計(jì)算是把當(dāng)前新增的數(shù)據(jù)在之前歷史數(shù)據(jù)的計(jì)算結(jié)果上做“增量計(jì)算”，同一條數(shù)據(jù)不重復(fù)參與計(jì)算，計(jì)算完成之后，再把計(jì)算結(jié)果保存起來(lái)，供業(yè)務(wù)使用，這時(shí)數(shù)據(jù)存儲(chǔ)的壓力也小了很多。同時(shí)“大”意味著數(shù)據(jù)并發(fā)很高，每秒可能需要計(jì)算上千萬(wàn)條新數(shù)據(jù)，這樣的計(jì)算量不是單機(jī)能承受的，所以大數(shù)據(jù)實(shí)時(shí)計(jì)算要解決好的是分布式系統(tǒng)架構(gòu)下的一系列技術(shù)問(wèn)題。
而分布式實(shí)時(shí)計(jì)算面臨的挑戰(zhàn)包括很多方面。數(shù)據(jù)從采集、到計(jì)算、到輸出整個(gè)過(guò)程必須做到低延遲，除了計(jì)算節(jié)點(diǎn)本身采用“增量計(jì)算”的模型，還要求上游數(shù)據(jù)傳輸模塊具有很高的吞吐能力，并且具備數(shù)據(jù)緩存的能力，在大流量場(chǎng)景下可以起到緩沖的作用，下游輸出模塊也需要做數(shù)據(jù)壓縮、批量輸出等優(yōu)化，以保證輸出結(jié)果的實(shí)時(shí)性。低延遲這個(gè)大前提對(duì)實(shí)時(shí)計(jì)算系統(tǒng)的其他特性提出了更高的要求。
雙11凌晨0點(diǎn)的時(shí)候，大量消費(fèi)者在同一時(shí)刻下單支付，這是涌進(jìn)實(shí)時(shí)計(jì)算系統(tǒng)的瞬時(shí)數(shù)據(jù)量是巨大的，系統(tǒng)需要有強(qiáng)大的并行處理數(shù)據(jù)的能力，將大量瞬時(shí)流量合理分配到成百上千個(gè)計(jì)算節(jié)點(diǎn)，并將這些節(jié)點(diǎn)的計(jì)算結(jié)果匯聚到一起計(jì)算出一個(gè)總體的結(jié)果，在高吞吐的情況下仍保證低延遲。
考拉海購(gòu)的大屏顯示只是大數(shù)據(jù)實(shí)時(shí)流計(jì)算的一種應(yīng)用場(chǎng)景，未來(lái)會(huì)有越來(lái)越多的實(shí)時(shí)計(jì)算場(chǎng)景，比如除了文本計(jì)算實(shí)時(shí)化，圖像、語(yǔ)音計(jì)算也可以實(shí)時(shí)化，在線機(jī)器學(xué)習(xí)，物聯(lián)網(wǎng)實(shí)時(shí)計(jì)算等。實(shí)時(shí)數(shù)據(jù)以及實(shí)時(shí)流計(jì)算場(chǎng)景的類(lèi)型都是指數(shù)增長(zhǎng)的，實(shí)時(shí)計(jì)算引擎會(huì)面臨不小的挑戰(zhàn)。
艾媒咨詢(xún)分析師Liz曾指出：“人工智能、機(jī)器人、大數(shù)據(jù)、反作弊等技術(shù)的加入，只是商業(yè)智能化的一個(gè)縮影，它不會(huì)止于電商，未來(lái)這些技術(shù)還會(huì)在我們的生活中更廣更深入的應(yīng)用和發(fā)展，雙11也將會(huì)變成巨頭們的科技。
據(jù)了解，截至今年7月，網(wǎng)易云已經(jīng)服務(wù)了35萬(wàn)企業(yè)客戶(hù)，覆蓋金融、電商、社交、教育、游戲、文化娛樂(lè)、醫(yī)療生物等互聯(lián)網(wǎng)企業(yè)以及傳統(tǒng)企業(yè)，并推出了通信與視頻、全智能云客服（七魚(yú)）、云計(jì)算基礎(chǔ)服務(wù)（蜂巢）、云安全（易盾）等一系列場(chǎng)景化云服務(wù)，和大數(shù)據(jù)管理與應(yīng)用開(kāi)發(fā)平臺(tái)（網(wǎng)易猛犸）、企業(yè)級(jí)大數(shù)據(jù)可視化分析平臺(tái)（網(wǎng)易有數(shù)）等大數(shù)據(jù)產(chǎn)品。
