高通在2017財(cái)年超過10億美元的物聯(lián)網(wǎng)收入后,宣布為物聯(lián)網(wǎng)應(yīng)用專門構(gòu)建新的產(chǎn)品系列。該公司最初宣布推出一系列IoT芯片組,QCS603和QCS605,以及軟件和參考設(shè)計(jì),這些都被稱為高通視覺智能平臺。該平臺將其Snapdragon芯片組上的圖像和人工智能(AI)處理功能帶入廣泛的消費(fèi)和工業(yè)應(yīng)用。
隨著從連接設(shè)備向智能設(shè)備的過渡,人們開始將AI處理從云端傳送到我們使用的設(shè)備,通常稱為“邊緣”或“邊緣設(shè)備”,指的是網(wǎng)絡(luò)邊緣。將AI引入邊緣可降低云和連接帶寬需求,同時(shí)提高安全性和系統(tǒng)性能。視覺加人工智能處理已經(jīng)成為自動(dòng)汽車和許多其他需要本地處理的應(yīng)用的關(guān)鍵元素。新的高通視覺智能平臺旨在為受到尺寸,散熱限制和/或電池壽命制約的應(yīng)用帶來類似的功能。
新的QCS芯片組和平臺的其他元素將利用高通的最新技術(shù)。該芯片組將利用最新的Snapdragon 845智能手機(jī)處理器(稱為人工智能引擎(AIE))中的同類AI處理解決方案。AIE利用將Kryo 300 CPU內(nèi)核,Hexagon 685矢量處理器和Adreno 615 GPU組合在一個(gè)片上系統(tǒng)中的異構(gòu)芯片架構(gòu)。此外,Vision Intelligence Platform還包括一個(gè)集成Spectra 270 ISP,支持雙16 MP圖像傳感器。該平臺還包括其他圖像技術(shù)以改善整體圖像性能,包括交錯(cuò)HDR,高級電子圖像穩(wěn)定,杜瓦瓶,去噪,色差校正和運(yùn)動(dòng)補(bǔ)償時(shí)間濾波器。
該平臺還支持音頻功能,包括噪聲和回聲消除,可用于用戶界面,自然語言處理和語音識別。這包括對高通3D音頻套件,Aqstic音頻技術(shù)和aptX音頻技術(shù)的支持。
QCS605包括兩款基于Arm Cortex-A75的Kryo CPU核心和六款基于Arm Cortex-A55的Kryo CPU內(nèi)核。QCS603包括兩個(gè)金Kryo CPU內(nèi)核和兩個(gè)銀Kryo CPU內(nèi)核。該芯片組還具有一個(gè)集成的顯示處理器,能夠?qū)崿F(xiàn)WQHD分辨率觸摸顯示,硬件加速合成,3D疊加以及對主要圖形API(包括OpenGL,OpenCL和Vulkan)的支持。為了實(shí)現(xiàn)連接,該芯片組具有集成的802.11ac Wi-Fi,藍(lán)牙5.1和GPS。芯片組也正在前沿10nm工藝節(jié)點(diǎn)上生產(chǎn)。
如果這一切聽起來對行業(yè)領(lǐng)先的移動(dòng)芯片組Snapdragon 845來說都很熟悉,那就是。高通公司聲稱QCS芯片組的性能與其旗艦Snapdragon產(chǎn)品并不相同,但它對于物聯(lián)網(wǎng)所需的要求和成本效益而言是密切和優(yōu)化的。6xx命名與Snapdragon系列的性能水平無關(guān)。該公司希望QCS芯片組家族成為一個(gè)獨(dú)立的產(chǎn)品線,具有自己的功能,性能水平和術(shù)語。
但是,芯片組只是解決方案的一半。高通還將與軟件一起提供常用的評估板和參考設(shè)計(jì)。該軟件包括神經(jīng)處理引擎軟件開發(fā)套件(SDK)以及針對領(lǐng)先的AI框架進(jìn)行優(yōu)化的庫和工具,包括TensorFlow,Caffe 2和Open Neural Network Exchange。該平臺還支持來自SenseTime,Pilot.ai和MM Solutions的Android Neural Networks API,Qualcomm的Hexagon神經(jīng)網(wǎng)絡(luò)庫以及多個(gè)第三方AI圖像識別和檢測解決方案。
QCS605強(qiáng)大的處理器能夠處理雙重圖像流 - 一個(gè)30kps的5.7k數(shù)據(jù)流或60fps的4k數(shù)據(jù)流,以及一個(gè)60fps的輔助1080p數(shù)據(jù)流,可用于數(shù)據(jù)分析。在AI推理處理方面,QCS605能夠達(dá)到每秒2.1 tera-operations(TOPS)。QCS603支持30 fps的4k和1080p數(shù)據(jù)流。ISP也針對弱光環(huán)境進(jìn)行了優(yōu)化。
高通公司瞄準(zhǔn)了廣泛應(yīng)用的平臺,包括運(yùn)動(dòng),VR,安全和360度相機(jī); 工業(yè)和消費(fèi)機(jī)器人; 和智能顯示器。然而,可能利用視覺和AI的物聯(lián)網(wǎng)應(yīng)用程序清單幾乎是無窮無盡的。對于工業(yè)應(yīng)用,高通還將支持更長的生命周期。QCS605和QCS603現(xiàn)在正在采樣。此外,Altek還提供基于QCS605的VR 360相機(jī)參考設(shè)計(jì)。
全新的QCS視覺智能平臺展示了移動(dòng)技術(shù)如何繼續(xù)推動(dòng)其他領(lǐng)域的創(chuàng)新,以及為什么移動(dòng)技術(shù)的領(lǐng)先地位對于任何希望在“物聯(lián)網(wǎng)”時(shí)代的智能競爭的公司都至關(guān)重要。