安防大數(shù)據(jù)涉及的數(shù)據(jù)類型較多,其特點(diǎn)是信息數(shù)據(jù)量大,信息密度小,目前市場(chǎng)上的安防大數(shù)據(jù)以非結(jié)構(gòu)化數(shù)據(jù)為主,存儲(chǔ)下來(lái)的數(shù)據(jù)之后都需要進(jìn)行數(shù)據(jù)融合、數(shù)據(jù)清洗、數(shù)據(jù)挖掘分析等。
其類型主要包含結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)信息。結(jié)構(gòu)化數(shù)據(jù)主要包括報(bào)警記錄、系統(tǒng)日志、運(yùn)維數(shù)據(jù)、摘要分析、結(jié)構(gòu)化描述記錄以及各種相關(guān)的信息數(shù)據(jù)庫(kù),如人口庫(kù)、六合一系統(tǒng)信息等;半結(jié)構(gòu)化數(shù)據(jù)如人臉建模數(shù)據(jù)、指紋信息等;而非結(jié)構(gòu)化數(shù)據(jù)主要包括視頻錄像和圖片記錄,如監(jiān)控、報(bào)警、視頻摘要記錄、錄像信息和卡口人臉數(shù)據(jù)等。
1.NoSQL數(shù)據(jù)庫(kù)
如今物聯(lián)網(wǎng)數(shù)據(jù)采集設(shè)備基本遍布整個(gè)城市,圖像、視頻、傳感信息等數(shù)據(jù)種類繁多,量級(jí)大已經(jīng)是目前的常態(tài)?,F(xiàn)在業(yè)內(nèi)采用的主流存儲(chǔ)技術(shù)是NoSQL,全稱Not Only SQL,有異與傳統(tǒng)的SOL關(guān)系型數(shù)據(jù)庫(kù),采用的是列式存儲(chǔ)方式,屬于非關(guān)系型數(shù)據(jù)庫(kù),主要用于存儲(chǔ)處理種類繁多的大規(guī)模數(shù)據(jù)集,這些數(shù)據(jù)存儲(chǔ)不需要固定的處理模式,無(wú)需多余操作就可以橫向擴(kuò)展。其中HBase是廣泛應(yīng)用的NoSQL數(shù)據(jù)庫(kù),HBase是一個(gè)高可靠性、高性能、面向列、可伸縮的分布式存儲(chǔ)系統(tǒng),利用HBase技術(shù)可在廉價(jià)PC Server上搭建起大規(guī)模結(jié)構(gòu)化存儲(chǔ)集群。
HBase的目標(biāo)是存儲(chǔ)并處理大型的數(shù)據(jù),具體來(lái)說(shuō)是僅需使用普通的硬件配置就能夠處理由成千上萬(wàn)的行和列所組成的大型數(shù)據(jù),能夠滿足安防大數(shù)據(jù)日常存儲(chǔ),降低存儲(chǔ)硬件的投資成本。
2.智能交通領(lǐng)域的應(yīng)用現(xiàn)狀
在智能交通領(lǐng)域,交通大數(shù)據(jù)具有體量大、種類多、數(shù)據(jù)更新頻率快的特征,掌握并應(yīng)用數(shù)據(jù)挖掘分析與多源數(shù)據(jù)融合技術(shù)顯得日益迫切。
目前數(shù)據(jù)分析以采集的交通大數(shù)據(jù)為基礎(chǔ),利用Hadoop、NoSQL、HBase、流處理等數(shù)據(jù)挖掘技術(shù),實(shí)現(xiàn)對(duì)海量交通數(shù)據(jù)的實(shí)時(shí)處理。針對(duì)亂闖紅燈、違法變道等違章現(xiàn)象實(shí)時(shí)告警并記錄,提高交警處理效率。
大數(shù)據(jù)技術(shù)本身具有強(qiáng)大的動(dòng)態(tài)檢測(cè)與預(yù)測(cè)能力,可以實(shí)時(shí)捕捉和動(dòng)態(tài)掌握交通運(yùn)行信息,能夠基于人臉識(shí)別、車牌識(shí)別、GPS定位技術(shù)等,掌握車輛的全天候出行規(guī)律,然后通過(guò)大量車輛數(shù)據(jù)進(jìn)行匯總分析,精確預(yù)測(cè)高峰時(shí)段車流等情況,輔助交通管理者進(jìn)行策略調(diào)整,提高城市交通運(yùn)轉(zhuǎn)效率等。
3.公共安全領(lǐng)域的應(yīng)用現(xiàn)狀
在公共安全領(lǐng)域,公安信息化建設(shè)發(fā)展迅猛,公安機(jī)關(guān)掌握了社會(huì)人口庫(kù)、機(jī)動(dòng)車登記數(shù)據(jù)庫(kù)、實(shí)名制住宿乘機(jī)記錄、卡口機(jī)動(dòng)車采集等,也包含了大量的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù),蘊(yùn)含著人、事、物、組織和案件等豐富信息。
利用大數(shù)據(jù)技術(shù)進(jìn)行關(guān)聯(lián)分析能夠在維護(hù)社會(huì)治安、打擊違法、指揮決策等方面具有重要意義?;诠泊髷?shù)據(jù)的多樣性,結(jié)合現(xiàn)在的數(shù)據(jù)融合技術(shù),采用分布式大數(shù)據(jù)協(xié)同技術(shù),實(shí)現(xiàn)物理分布、邏輯統(tǒng)一的數(shù)據(jù)管理,解決數(shù)據(jù)資源分布在多個(gè)區(qū)域數(shù)據(jù)中心,開展數(shù)據(jù)資源綜合應(yīng)用的問(wèn)題,合理運(yùn)用流處理與批處理,提高對(duì)不同類型數(shù)據(jù)的處理效率。
同時(shí)基于數(shù)據(jù)分析挖掘技術(shù),根據(jù)人物車輛信息實(shí)現(xiàn)卡口緝查布控、車輛落腳點(diǎn)分析、伴隨車輛跟蹤、以圖搜圖等案件業(yè)務(wù)的處理防范等。