高通發(fā)布兩款系統(tǒng)級芯片,專用于物聯(lián)網(wǎng)和視覺智能
兩周前我們報道了Nvidia對一系列AI向產(chǎn)品的公告。其中公布了就將部分Nvidia技術(shù)整合入ARM芯片設(shè)計,特別是提供針對物聯(lián)網(wǎng)設(shè)備AI處理的優(yōu)化達(dá)成合作伙伴協(xié)議。
本文引用地址:http://www.ex-cimer.com/article/201804/378323.htm不甘示弱的高通在本周公布了自己物聯(lián)網(wǎng)和AI優(yōu)化系統(tǒng)級芯片,該芯片著力針對計算機(jī)視覺處理產(chǎn)品。公司將在這一領(lǐng)域投放新銳的QCS603和SCQ605芯片,這兩款產(chǎn)品值得我們關(guān)注。
高通在物聯(lián)網(wǎng)領(lǐng)域的產(chǎn)品管理副總裁Seshu Madhavapeddy向記者仔細(xì)的介紹了這兩款產(chǎn)品。
特殊應(yīng)用
Madhavapeddy表示新的系統(tǒng)級芯片專為尖端物聯(lián)網(wǎng)設(shè)計,能盡量在本地芯片上處理大量數(shù)據(jù),以將傳輸?shù)交A(chǔ)設(shè)施上的數(shù)據(jù)量減至最小值。同時QCS603和605有針對視覺智能的特殊裝備。包括安全攝像機(jī)、運動相機(jī)、可穿戴相機(jī)、虛擬現(xiàn)實相機(jī)、機(jī)器人和智能顯示器都可以享受到特別優(yōu)化。
Madhavepeddy先生接著解釋了物聯(lián)網(wǎng)相機(jī)和手機(jī)的區(qū)別。物聯(lián)網(wǎng)攝像機(jī)需要在比如1勒克司的低光環(huán)境中運行。他們的穩(wěn)定環(huán)境也有區(qū)別:智能手機(jī)只要拍攝不那么模糊的快照,而智能設(shè)備的相機(jī)則要從運動中的頭盔或者飛行的無人機(jī)上獨立為操作者拍攝出聚焦正確的可辨識視頻。
603和605可以在這樣低亮度且不穩(wěn)定的環(huán)境下工作。他們也可以同AI系統(tǒng)配合,處理機(jī)器人的障礙規(guī)避行為。
設(shè)備端AI
高通的AI處理器包括他的曉龍神經(jīng)處理引擎(NPE)框架。該框架可以兼容基于Tensorflow、Caff、Caff2、Android Neural Networks API以及高通自己的Hexagon Neural Network在內(nèi)的主流深度學(xué)習(xí)庫創(chuàng)建的模塊。
這些模塊可以通過源平臺特定的軟件開發(fā)工具包(SDKs)植入高通的AI引擎。高通的AI引擎會進(jìn)行優(yōu)化推理:根據(jù)設(shè)備上的機(jī)器學(xué)習(xí)模塊對圖片數(shù)據(jù)進(jìn)行評價。模塊訓(xùn)練很可能依然會在擁有強(qiáng)大充分GPU的云端進(jìn)行。
603和605是低功耗產(chǎn)品,被設(shè)計可以在電池供能的設(shè)備商運作。他們都集成了Wi-Fi、高通的Adreno GPU、多個Qualcomm Cryo ARM CPU核心、一塊Hexagon 685 Vector處理器和上文中提到的AI引擎。
隨心所欲的視頻能力和強(qiáng)大的Wi-Fi
圖像信息不再意味著圖片,而是視頻。604和605擁有怪物級的視頻能力。605最高可以同時處理60fps下4K(終極高清)和1080P(完全高清)視頻信息的流傳輸。在低幀率時該芯片可以同時處理更多視頻信息。603最高可以同時處理30fps下4K和720P流傳輸。
總的來說,QCS603和605是類似的產(chǎn)品,603功耗低,各項指標(biāo)也低一些。比如605擁有8核CPU,2x2 802. 11ac Wi-Fi,而603則是4核CPU,1x1 802.11ac Wi-Fi。
低功耗系統(tǒng)級芯片上的高功耗級表現(xiàn)。
高通的視覺智能平臺可以為深度神經(jīng)網(wǎng)絡(luò)推理提供2.1個TOPS(每秒操作數(shù),跟每秒浮點運行數(shù)FLOS類似,但是沒有浮點運算)的算力。可以支持雙1600萬像素傳感器的雙14位Spectra 270圖像信號處理器提供了上述算力。
快趕上AI熱潮
就像1980年代個人電腦證明高價值計算不止能在大型主機(jī)上進(jìn)行。智能物聯(lián)網(wǎng)設(shè)備和其背后的芯片向我們證明AI計算可以在設(shè)備端進(jìn)行,而不僅限于云端。兩次變革的宗旨是一樣的:只要開發(fā)者用心,用戶的設(shè)備不是非得又大又笨不可。
準(zhǔn)備好了,包括本文提到芯片在內(nèi)一系列硬件進(jìn)步將會引領(lǐng)AI尖端技術(shù)的成長。我們越早能把AI從數(shù)據(jù)中心(作為其唯一可能存在的設(shè)備)解放出來,終端用戶和開發(fā)者就可以更方便地接觸到他們。
評論