中聯(lián)重科是國(guó)內(nèi)領(lǐng)先的工程機(jī)械、農(nóng)業(yè)機(jī)械等高新技術(shù)裝備研發(fā)制造商,為全球6大洲100多個(gè)國(guó)家的客戶創(chuàng)造價(jià)值。
在近年來日益嚴(yán)峻的市場(chǎng)環(huán)境下,中聯(lián)重科在利用大數(shù)據(jù)平臺(tái)實(shí)現(xiàn)智能化轉(zhuǎn)型升 級(jí)之路上不斷探索。
部署Cloudera企業(yè)級(jí)之后,該公司有效降低了自身服務(wù)成本,同時(shí)提升了設(shè)備租賃服務(wù)、二手設(shè)備交易以及零配件銷售等后市場(chǎng)的服務(wù)收益,實(shí)現(xiàn)了向“產(chǎn)品在網(wǎng)上、數(shù)據(jù)在云上、服務(wù)在掌上”的新商業(yè)模式轉(zhuǎn)型升級(jí)。同時(shí),中聯(lián)重科有效地幫助客戶優(yōu)化自身經(jīng)營(yíng)管理的能力、為客戶降低運(yùn)營(yíng)成本,實(shí)現(xiàn)共贏。
挑戰(zhàn)
國(guó)內(nèi)經(jīng)濟(jì)增速下滑,投資放緩以及房地產(chǎn)市場(chǎng)疲弱,導(dǎo)致工程機(jī)械行業(yè)設(shè)備供過 于求,新機(jī)需求放緩。而與此對(duì)應(yīng)的是潛力巨大、年市場(chǎng)規(guī)模近1500億元的服務(wù)后市 場(chǎng)。如何盡快通過工業(yè)大數(shù)據(jù)技術(shù),對(duì)設(shè)備、客戶等數(shù)據(jù)進(jìn)行深度挖掘,實(shí)現(xiàn)上下游 信息充分共享和深度融合,在降低成本的同時(shí)形成良性服務(wù)生態(tài)圈、拓展行業(yè)盈利空間, 成為了對(duì)中聯(lián)重科的重大挑戰(zhàn)。
中聯(lián)重科麓谷工業(yè)園一景圖
同時(shí),施工行業(yè)對(duì)安全、效率、成本管控的重視程度日益提高,要求設(shè)備廠商在 持續(xù)提升設(shè)備質(zhì)量的同時(shí),進(jìn)一步強(qiáng)化其智能化水平和數(shù)據(jù)分析處理能力,由“被動(dòng) 服務(wù)”向“主動(dòng)服務(wù)”升級(jí),降低施工風(fēng)險(xiǎn)、提升無故障工作時(shí)間,實(shí)現(xiàn)“降本增效”。 中聯(lián)重科亟需通過大數(shù)據(jù)分析使其更加貼近市場(chǎng)、理解客戶,提升企業(yè)運(yùn)營(yíng)管理和決 策效率,快速?gòu)膫鹘y(tǒng)生產(chǎn)制造型企業(yè)向高端智能服務(wù)型企業(yè)的轉(zhuǎn)型升級(jí)。
業(yè)務(wù)驅(qū)動(dòng)因素
中聯(lián)重科通過對(duì)多家大數(shù)據(jù)平臺(tái)供應(yīng)商的考察和試用,經(jīng)過歷時(shí)兩個(gè)多月的選型 階段,最終選擇了Cloudera CDH 的發(fā)行版。選擇與Cloudera合作是基于中聯(lián)重科對(duì)自身業(yè)務(wù)需求的全面考慮 :
首先,中聯(lián)重科希望采用基于開源的體系,特別是成熟的Hadoop分布式架構(gòu);其次,產(chǎn)品需要在擴(kuò)展性方面占據(jù)優(yōu)勢(shì);第三是希望與業(yè)內(nèi)領(lǐng)先的供應(yīng)商達(dá)成長(zhǎng)期的戰(zhàn)略性合作,通過供應(yīng)商對(duì)生態(tài)體系做出貢獻(xiàn)、同時(shí)為工程機(jī)械行業(yè)起到標(biāo)桿作用。
具體到業(yè)務(wù)層面,中聯(lián)重科大數(shù)據(jù)平臺(tái)的數(shù)據(jù)來源于三個(gè)方面 :
中聯(lián)重科工程機(jī)械物聯(lián)網(wǎng)云平臺(tái)監(jiān)控室圖
物聯(lián)網(wǎng)數(shù)據(jù) :主要包括中聯(lián)重科12余萬(wàn)臺(tái)設(shè)備實(shí)時(shí)回傳的工況、位置信息。存量數(shù)據(jù)量約40TB,每天新增數(shù)據(jù)1T,壓縮后每天新增數(shù)據(jù)200G ;
內(nèi)部核心業(yè)務(wù)系統(tǒng)數(shù)據(jù) :即營(yíng)運(yùn)過程中產(chǎn)生的業(yè)務(wù)信息,主要包括來自 ERP、CRM、金融服務(wù)系統(tǒng)等的數(shù)據(jù),涵蓋研發(fā)、生產(chǎn)、銷售、服務(wù)全環(huán)節(jié)。當(dāng)前存量數(shù)據(jù)約10TB,數(shù)據(jù)每天進(jìn)行更新 ;
外部應(yīng)用平臺(tái)數(shù)據(jù) :包含相關(guān)應(yīng)用平臺(tái)(官方網(wǎng)站、微信公眾號(hào) / 企業(yè)號(hào)、中聯(lián)商城等)積累的數(shù)據(jù)、從第三方購(gòu)買和交換的數(shù)據(jù)及相關(guān)企業(yè)公開數(shù)據(jù)。除結(jié)構(gòu)化數(shù)據(jù)外,平臺(tái)還以日志方式保存了大量的用戶行為數(shù)據(jù)。
面對(duì)海量數(shù)據(jù)的增長(zhǎng),以及各種結(jié)構(gòu)及非結(jié)構(gòu)化數(shù)據(jù)格式,中聯(lián)重科決定采用 Cloudera CDH 發(fā)行版大數(shù)據(jù)平臺(tái)來應(yīng)對(duì)挑戰(zhàn)。Cloudera領(lǐng)先的技術(shù)和完善的服務(wù)能夠?yàn)橹新?lián)重科大數(shù)據(jù)平臺(tái)的運(yùn)營(yíng)提供保障:通過流式處理架構(gòu),滿足高時(shí)效性的數(shù)據(jù)分析需求 ;通過分布式運(yùn)算架構(gòu),滿足對(duì)海量數(shù)據(jù)的離線深度挖掘。
解決方案
Cloudera的企業(yè)級(jí)服務(wù)能夠?yàn)橹新?lián)重科大數(shù)據(jù)平臺(tái)的運(yùn)營(yíng)提供實(shí)時(shí)、安全的“一站式”有效保障,解決開源體系的各項(xiàng)技術(shù)難點(diǎn),例如各組件之間的適配等等,為中聯(lián)重科團(tuán)隊(duì)解決了運(yùn)維平臺(tái)、系統(tǒng)層面上的后顧之憂,使其可以重點(diǎn)聚焦于進(jìn)行業(yè)務(wù)分析、數(shù)據(jù)挖掘等創(chuàng)造更高數(shù)據(jù)價(jià)值的層面。
經(jīng)過歷史約 3 個(gè)月的部署,中聯(lián)重科大數(shù)據(jù)平臺(tái)于 2016 年 3 月正式上線,成功地將物聯(lián)網(wǎng)平臺(tái)、企業(yè)內(nèi)部的 ERP、CRM 等核心平臺(tái)在 Cloudera 的現(xiàn)代化數(shù)據(jù)管理平臺(tái)上互相貫通,并通過相應(yīng)組件把數(shù)據(jù)采集到大數(shù)據(jù)平臺(tái)上。
不僅整合了企業(yè)的各個(gè)數(shù)據(jù)鏈條,還實(shí)現(xiàn)了對(duì)外提供產(chǎn)品支。例如“中聯(lián) e 管家”應(yīng)用,支持客戶調(diào)用運(yùn)營(yíng)數(shù)據(jù)并對(duì)設(shè)備進(jìn)行 管理,為其大幅提升管理效率。
中聯(lián)重科工業(yè)大數(shù)據(jù)平臺(tái)架構(gòu)圖
為保證物聯(lián)網(wǎng)設(shè)備數(shù)據(jù)的實(shí)時(shí)性,平臺(tái)建設(shè)采用了 kafka、flume 相關(guān)技術(shù)。數(shù)據(jù)采集方面采用 sqoop 技術(shù),在實(shí)時(shí)數(shù)據(jù)存儲(chǔ)方面主要采用 Hbase、HDFS 文件。在數(shù)據(jù)倉(cāng)庫(kù)方面,則采用 hive、impala 等技術(shù)。另外,spark 等多項(xiàng)技術(shù)也被綜合應(yīng)用,保證平臺(tái)的安全、順利運(yùn)營(yíng)。
為保證數(shù)據(jù)安全,平臺(tái)還引入了企業(yè)級(jí)數(shù)據(jù)治理組件,實(shí)現(xiàn)統(tǒng)一的元數(shù)據(jù)管理、數(shù)據(jù) 質(zhì)量控制、數(shù)據(jù)溯源、數(shù)據(jù)操作權(quán)限管控、數(shù)據(jù)脫敏及數(shù)據(jù)使用審計(jì)功能,并貫穿數(shù)據(jù)存 儲(chǔ)和應(yīng)用的全過程。
影響
憑借Cloudera大數(shù)據(jù)平臺(tái),中聯(lián)重科工業(yè)大數(shù)據(jù)的應(yīng)用實(shí)踐不僅為其項(xiàng)目實(shí)現(xiàn)了顯著的經(jīng)濟(jì)效益,也為客戶創(chuàng)造了可觀的預(yù)期效益空間:
中聯(lián)重科的服務(wù)成本下降了30%,零配件周轉(zhuǎn)率提升20%;同時(shí)后服務(wù)市場(chǎng)收入大幅提升:設(shè)備租賃服務(wù)、二手設(shè)備交易以及零配件銷售占比銷售額提升10%;而深度數(shù)據(jù)分析帶來的增值服務(wù)收益也提升了高達(dá)30%。
項(xiàng)目實(shí)施后,中聯(lián)重科還成功地幫助客戶提升自身經(jīng)營(yíng)管理的能力,為客戶降低包括人力、燃油、維修、設(shè)備管理等設(shè)備運(yùn)營(yíng)主要成本。
例如,“中聯(lián)e管家”應(yīng)用可以為客戶提升設(shè)備管理效率高達(dá)30%;建筑起重機(jī)全生命周期管理平臺(tái)能夠?yàn)榭蛻艚档桶踩鹿事?0%,設(shè)備有效工作時(shí)長(zhǎng)提升20%,人力、維修成本降低30%。
Cloudera公司基于最新的開源技術(shù)提供現(xiàn)代化的數(shù)據(jù)管理、分析和機(jī)器學(xué)習(xí)平臺(tái)。全球領(lǐng)先的企業(yè)機(jī)構(gòu)都信賴Cloudera公司幫助他們通過利用 Cloudera 企業(yè)版產(chǎn)品,解決其所面臨的最具挑戰(zhàn)性的業(yè)務(wù)問題?;鄱即髷?shù)據(jù)提供專業(yè)大數(shù)據(jù)團(tuán)隊(duì)為企業(yè)提供Cloudera大數(shù)據(jù)平臺(tái)搭建和實(shí)施,免費(fèi)業(yè)務(wù)質(zhì)詢,定制開發(fā)等服務(wù),快速、輕松、低成本將任何Hadoop集群從試用階段轉(zhuǎn)移到生產(chǎn)階段。
慧都大數(shù)據(jù)還提供Hadoop大數(shù)據(jù)集群搭建、大數(shù)據(jù)平臺(tái)搭建、大數(shù)據(jù)解決方案、免費(fèi)業(yè)務(wù)咨詢等大數(shù)據(jù)服務(wù),以底層基于慧都大數(shù)據(jù)基礎(chǔ)平臺(tái)DataForce提供高效存儲(chǔ)和計(jì)算能力,搭建安全、高效、可靠的大數(shù)據(jù)分析平臺(tái),我們還提供組件自定義搭配,為企業(yè)選擇滿足方案需要的大數(shù)據(jù)功能組件,使您的大數(shù)據(jù)解決方案成本降到最低,從而高品質(zhì)的解決您的大數(shù)據(jù)需求問題。