隨著全球各大科技巨頭的競相加入，開源軟件技術(shù)已經(jīng)活躍在各個(gè)信息技術(shù)領(lǐng)域當(dāng)中。其中，大數(shù)據(jù)生態(tài)成為開源技術(shù)的直接受益者。開源技術(shù)適用于龐雜的數(shù)據(jù)管理系統(tǒng)，帶來敏捷、高效、可擴(kuò)展以及可自控的管理能力，并幫助企業(yè)降低IT建設(shè)及維護(hù)成本。2018年雙11當(dāng)天，阿里云原生數(shù)據(jù)庫PolarDB輕松應(yīng)對了0點(diǎn)0分0秒瞬時(shí)提升122倍的數(shù)據(jù)洪峰。Netflix也采用自研開源架構(gòu)Metacat將海量數(shù)據(jù)集合成一個(gè)“單一”的數(shù)據(jù)倉庫，大幅提升管理能效。
當(dāng)前，我國有越來越多的企業(yè)、人才加入到開源社區(qū)，貢獻(xiàn)力也“后來居上”，共同推進(jìn)開源項(xiàng)目、開源生態(tài)的繁榮和可持續(xù)發(fā)展。
大數(shù)據(jù)生態(tài)成為開源技術(shù)重大“受益者”
近年來，在互聯(lián)網(wǎng)服務(wù)、多媒體以及科學(xué)研究等多個(gè)領(lǐng)域，都可見到大數(shù)據(jù)的身影。在大數(shù)據(jù)時(shí)代，不斷增長的數(shù)據(jù)量、快速處理數(shù)據(jù)的需求以及數(shù)據(jù)類型、結(jié)構(gòu)和來源的多樣性給數(shù)據(jù)庫敏捷、高效、可擴(kuò)展性以及個(gè)性化管理帶來了全新挑戰(zhàn)。
開源技術(shù)賦能了大數(shù)據(jù)生態(tài)的高質(zhì)量發(fā)展。賽迪智庫信息化和軟件服務(wù)業(yè)所博士蒲松濤表示，經(jīng)過了數(shù)十年的發(fā)展，開源軟件和開源工具已經(jīng)應(yīng)用到了大數(shù)據(jù)產(chǎn)業(yè)發(fā)展的各個(gè)環(huán)節(jié)，基于開源軟件，企業(yè)可以快速構(gòu)建大數(shù)據(jù)應(yīng)用平臺，提供豐富的大數(shù)據(jù)開發(fā)和應(yīng)用工具。
當(dāng)前，幾乎各種規(guī)模的企業(yè)都在使用開源軟件和工具做大數(shù)據(jù)處理和基于數(shù)據(jù)的預(yù)測分析。開源界也涌現(xiàn)出了Hadoop、OpenStack、OpenShift、Mapreduce、docker等引領(lǐng)行業(yè)技術(shù)創(chuàng)新方向的重量級開源項(xiàng)目。
華泰人壽基于OpenShift架構(gòu)打造易于管理的新IT系統(tǒng)，以提升企業(yè)競爭力，實(shí)現(xiàn)業(yè)務(wù)數(shù)字化轉(zhuǎn)型。在基礎(chǔ)設(shè)施上，引入紅帽O(jiān)penShift容器云解決方案和紅帽Ceph分布式存儲。通過將保險(xiǎn)業(yè)務(wù)上docker云，實(shí)現(xiàn)華泰人壽業(yè)務(wù)的彈性伸縮和快速上線，加速其互聯(lián)網(wǎng)保險(xiǎn)項(xiàng)目快速落地。
美國知名在線影片租賃提供商N(yùn)etflix也采用了大數(shù)據(jù)發(fā)現(xiàn)服務(wù)的開源框架Metacat。由于Netflix的數(shù)據(jù)倉庫由許多大型的數(shù)據(jù)集組成，為了確保數(shù)據(jù)平臺能夠橫跨這些數(shù)據(jù)集成為一個(gè)“單一”的數(shù)據(jù)倉庫，Netflix開發(fā)的元數(shù)據(jù)服務(wù)Metacat，能讓數(shù)據(jù)的發(fā)生、發(fā)現(xiàn)、處理和管理變得更加快捷高效、處理精度大幅提升;同時(shí)還可兼容Spark、Presto、Pig和Hive架構(gòu)。Netflix軟件架構(gòu)師Ajoy Majumdar指出，開放開源是身為技術(shù)公司的競爭戰(zhàn)略，既能夠?qū)⒆约旱慕鉀Q方案建立為行業(yè)標(biāo)準(zhǔn)和最佳實(shí)踐，又能建立Netflix的技術(shù)品牌，還能從共享生態(tài)中獲得反饋輸入并受益。
事實(shí)上，推動(dòng)大數(shù)據(jù)應(yīng)用高質(zhì)量發(fā)展的主流開源平臺還有很多，例如Spark、Shark、Bagel等。蒲松濤表示，這些開源平臺大幅降低應(yīng)用門檻，有效幫助企業(yè)實(shí)現(xiàn)工業(yè)級應(yīng)用，進(jìn)而帶動(dòng)各行業(yè)大規(guī)模部署。此外，大數(shù)據(jù)還涌現(xiàn)出了一批開源支線平臺。其中，Storm完全擺脫了經(jīng)典的MapReduce架構(gòu)，重新設(shè)計(jì)了一個(gè)適用于流式計(jì)算的架構(gòu)，以數(shù)據(jù)流為驅(qū)動(dòng)觸發(fā)計(jì)算，計(jì)算時(shí)效性高，適應(yīng)有向無環(huán)圖計(jì)算拓?fù)涞脑O(shè)計(jì)，計(jì)算方式較為靈活，在業(yè)界得到了一定的部署應(yīng)用。
開源社區(qū)供需“雙贏”中國力量已崛起
開源成為一種加速技術(shù)研發(fā)速度、節(jié)約成本、效益最大化以及推動(dòng)技術(shù)創(chuàng)新和產(chǎn)業(yè)發(fā)展的有效路徑。阿里云智能數(shù)據(jù)庫事業(yè)部負(fù)責(zé)人、達(dá)摩院數(shù)據(jù)庫首席科學(xué)家李飛飛在接受《中國電子報(bào)》記者專訪時(shí)表示，不同于傳統(tǒng)的閉源商業(yè)軟件，開源軟件的創(chuàng)新不局限于一個(gè)企業(yè)或某一些團(tuán)隊(duì)，而是無國界的，是群智開發(fā)的典型實(shí)踐。
開源社區(qū)的建立為推動(dòng)開源軟件發(fā)展、構(gòu)建行業(yè)競爭優(yōu)勢做出突出貢獻(xiàn)，隊(duì)伍的壯大需要每一位使用者持續(xù)不斷的貢獻(xiàn)智慧，以實(shí)現(xiàn)真正的“共贏”。開源的發(fā)展歷程中，極客、大公司、商業(yè)顛覆者輪番登場，開源技術(shù)的訴求也從商業(yè)驅(qū)動(dòng)向生態(tài)驅(qū)動(dòng)發(fā)展。中國工程院院士廖湘科指出，開源是軟件創(chuàng)新技術(shù)的主要來源，是生態(tài)抓手，而非贏利的切入點(diǎn)。
開源軟件的“共享和貢獻(xiàn)”機(jī)制吸引了眾多開發(fā)者的參與，給了每一位開發(fā)者“顛覆游戲規(guī)則”的權(quán)利。有了這種生態(tài)的加持，信息技術(shù)將被快速推進(jìn)，各個(gè)參與者將持續(xù)獲利。對此，李飛飛表示，開源生態(tài)的受益者是開源技術(shù)的需求側(cè)和供給側(cè)雙方。從供給側(cè)角度來看，參與的人越多，思維碰撞而引發(fā)的迭代演進(jìn)就會越快;從需求側(cè)角度來看，各個(gè)企業(yè)不僅可以免除被閉源系統(tǒng)“技術(shù)綁定”，還可以在開源社區(qū)實(shí)現(xiàn)數(shù)據(jù)庫技術(shù)遷移，企業(yè)還可針對企業(yè)技術(shù)特征進(jìn)行數(shù)據(jù)庫的個(gè)性定制化，實(shí)現(xiàn)大量的應(yīng)用和代碼的改造且系統(tǒng)間互相兼容。
中國開源軟件推進(jìn)聯(lián)盟副主席兼秘書長劉澎在PostgreSQL.CN 2019上表示，當(dāng)前國內(nèi)越來越多的企業(yè)為開源做出重要貢獻(xiàn)，我國的開源實(shí)力已經(jīng)崛起。以華為、阿里等為代表的開源軟件開發(fā)者已經(jīng)逐漸與亞馬遜、微軟站到了同一高度，實(shí)現(xiàn)了從“使用者”到“引領(lǐng)者”的身份轉(zhuǎn)變。
目前，中國企業(yè)在Linux基金會中有1個(gè)白金會員(華為)，1個(gè)金牌會員(阿里云)和數(shù)十家銀牌會員(包括騰訊、中國移動(dòng)、聯(lián)想等)。華為在多個(gè)開源社區(qū)貢獻(xiàn)排名前列。中國工程院院士倪光南認(rèn)為，華為是開源軟件的優(yōu)秀開發(fā)代表，通過引進(jìn)、消化，實(shí)現(xiàn)創(chuàng)新發(fā)展，進(jìn)而貢獻(xiàn)給整個(gè)開源社區(qū)。
阿里云也成為游戲規(guī)則的重要改變者和全球云數(shù)據(jù)庫領(lǐng)跑者之一。2018年，阿里云數(shù)據(jù)庫成功進(jìn)入Gartner數(shù)據(jù)庫魔力象限，這是該榜單首次出現(xiàn)中國公司。近日，Gartner發(fā)布的全球云數(shù)據(jù)庫市場份額榜單中，阿里云位居第三，超越了Oracle、IBM和谷歌。5月21日，阿里云提供傳統(tǒng)數(shù)據(jù)庫一鍵遷移上云能力，可以幫助企業(yè)將線下的MySQL、PostgreSQL和Oracle等數(shù)據(jù)庫輕松上云，最快數(shù)小時(shí)內(nèi)遷移完成。李飛飛表示，阿里云自研的PolarDB云原生數(shù)據(jù)庫的分布式存儲架構(gòu)具有一寫多度、計(jì)算與存儲分離等優(yōu)勢，幫助淘寶交易平臺應(yīng)對了雙11當(dāng)天瞬時(shí)提升122倍的數(shù)據(jù)洪峰。
此外，國內(nèi)還有包括百度、浪潮、瀚高等在內(nèi)的眾多企業(yè)積極參與并貢獻(xiàn)到開源社區(qū)當(dāng)中。人工智能、自動(dòng)駕駛等新興信息技術(shù)也成為開源項(xiàng)目的重要應(yīng)用領(lǐng)域。
