高通發(fā)布兩款系統(tǒng)級(jí)芯片,專(zhuān)用于物聯(lián)網(wǎng)和視覺(jué)智能
兩周前我們報(bào)道了Nvidia對(duì)一系列AI向產(chǎn)品的公告。其中公布了就將部分Nvidia技術(shù)整合入ARM芯片設(shè)計(jì),特別是提供針對(duì)物聯(lián)網(wǎng)設(shè)備AI處理的優(yōu)化達(dá)成合作伙伴協(xié)議。
本文引用地址:http://m.butianyuan.cn/article/201804/378323.htm不甘示弱的高通在本周公布了自己物聯(lián)網(wǎng)和AI優(yōu)化系統(tǒng)級(jí)芯片,該芯片著力針對(duì)計(jì)算機(jī)視覺(jué)處理產(chǎn)品。公司將在這一領(lǐng)域投放新銳的QCS603和SCQ605芯片,這兩款產(chǎn)品值得我們關(guān)注。
高通在物聯(lián)網(wǎng)領(lǐng)域的產(chǎn)品管理副總裁Seshu Madhavapeddy向記者仔細(xì)的介紹了這兩款產(chǎn)品。
特殊應(yīng)用
Madhavapeddy表示新的系統(tǒng)級(jí)芯片專(zhuān)為尖端物聯(lián)網(wǎng)設(shè)計(jì),能盡量在本地芯片上處理大量數(shù)據(jù),以將傳輸?shù)交A(chǔ)設(shè)施上的數(shù)據(jù)量減至最小值。同時(shí)QCS603和605有針對(duì)視覺(jué)智能的特殊裝備。包括安全攝像機(jī)、運(yùn)動(dòng)相機(jī)、可穿戴相機(jī)、虛擬現(xiàn)實(shí)相機(jī)、機(jī)器人和智能顯示器都可以享受到特別優(yōu)化。
Madhavepeddy先生接著解釋了物聯(lián)網(wǎng)相機(jī)和手機(jī)的區(qū)別。物聯(lián)網(wǎng)攝像機(jī)需要在比如1勒克司的低光環(huán)境中運(yùn)行。他們的穩(wěn)定環(huán)境也有區(qū)別:智能手機(jī)只要拍攝不那么模糊的快照,而智能設(shè)備的相機(jī)則要從運(yùn)動(dòng)中的頭盔或者飛行的無(wú)人機(jī)上獨(dú)立為操作者拍攝出聚焦正確的可辨識(shí)視頻。
603和605可以在這樣低亮度且不穩(wěn)定的環(huán)境下工作。他們也可以同AI系統(tǒng)配合,處理機(jī)器人的障礙規(guī)避行為。
設(shè)備端AI
高通的AI處理器包括他的曉龍神經(jīng)處理引擎(NPE)框架。該框架可以兼容基于Tensorflow、Caff、Caff2、Android Neural Networks API以及高通自己的Hexagon Neural Network在內(nèi)的主流深度學(xué)習(xí)庫(kù)創(chuàng)建的模塊。
這些模塊可以通過(guò)源平臺(tái)特定的軟件開(kāi)發(fā)工具包(SDKs)植入高通的AI引擎。高通的AI引擎會(huì)進(jìn)行優(yōu)化推理:根據(jù)設(shè)備上的機(jī)器學(xué)習(xí)模塊對(duì)圖片數(shù)據(jù)進(jìn)行評(píng)價(jià)。模塊訓(xùn)練很可能依然會(huì)在擁有強(qiáng)大充分GPU的云端進(jìn)行。
603和605是低功耗產(chǎn)品,被設(shè)計(jì)可以在電池供能的設(shè)備商運(yùn)作。他們都集成了Wi-Fi、高通的Adreno GPU、多個(gè)Qualcomm Cryo ARM CPU核心、一塊Hexagon 685 Vector處理器和上文中提到的AI引擎。
隨心所欲的視頻能力和強(qiáng)大的Wi-Fi
圖像信息不再意味著圖片,而是視頻。604和605擁有怪物級(jí)的視頻能力。605最高可以同時(shí)處理60fps下4K(終極高清)和1080P(完全高清)視頻信息的流傳輸。在低幀率時(shí)該芯片可以同時(shí)處理更多視頻信息。603最高可以同時(shí)處理30fps下4K和720P流傳輸。
總的來(lái)說(shuō),QCS603和605是類(lèi)似的產(chǎn)品,603功耗低,各項(xiàng)指標(biāo)也低一些。比如605擁有8核CPU,2x2 802. 11ac Wi-Fi,而603則是4核CPU,1x1 802.11ac Wi-Fi。
低功耗系統(tǒng)級(jí)芯片上的高功耗級(jí)表現(xiàn)。
高通的視覺(jué)智能平臺(tái)可以為深度神經(jīng)網(wǎng)絡(luò)推理提供2.1個(gè)TOPS(每秒操作數(shù),跟每秒浮點(diǎn)運(yùn)行數(shù)FLOS類(lèi)似,但是沒(méi)有浮點(diǎn)運(yùn)算)的算力。可以支持雙1600萬(wàn)像素傳感器的雙14位Spectra 270圖像信號(hào)處理器提供了上述算力。
快趕上AI熱潮
就像1980年代個(gè)人電腦證明高價(jià)值計(jì)算不止能在大型主機(jī)上進(jìn)行。智能物聯(lián)網(wǎng)設(shè)備和其背后的芯片向我們證明AI計(jì)算可以在設(shè)備端進(jìn)行,而不僅限于云端。兩次變革的宗旨是一樣的:只要開(kāi)發(fā)者用心,用戶(hù)的設(shè)備不是非得又大又笨不可。
準(zhǔn)備好了,包括本文提到芯片在內(nèi)一系列硬件進(jìn)步將會(huì)引領(lǐng)AI尖端技術(shù)的成長(zhǎng)。我們?cè)皆缒馨袮I從數(shù)據(jù)中心(作為其唯一可能存在的設(shè)備)解放出來(lái),終端用戶(hù)和開(kāi)發(fā)者就可以更方便地接觸到他們。
評(píng)論