0
本文作者: 木子 | 2021-08-04 10:22 |
“君正是最早一家全身心地聚焦SVIoT賽道的芯片企業(yè),并提供芯片,AI算力,開發(fā)平臺(tái)和解決方案等全棧式核心技術(shù)。”
近日,合肥君正帶著一顆叫T40的芯片,首次圍繞SVIoT概念,正式走到了市場(chǎng)臺(tái)前。
智能視覺(jué)物聯(lián)網(wǎng),即SVIoT,Smart Vision for the Internet of Things(SVIoT)。
如其名,它是由物聯(lián)網(wǎng)賽道發(fā)展而來(lái)。
SVIoT與傳統(tǒng)IoT/AIoT同源,都屬于IoT范疇,都屬于智能硬件范疇,都涉及芯片、產(chǎn)品、算法、方案、聯(lián)網(wǎng)等環(huán)節(jié)。
但,SVIoT與后者也有不同。
IoT以無(wú)線互聯(lián)(WIFI/BT/…)和MCU為主導(dǎo),以小設(shè)備為核心;AIoT則概念宏大,似乎除手機(jī)和PC外,均可AIoT。
SVIoT聚焦于視覺(jué),定位明確。
從信息獲取的角度,視覺(jué)是最重要的感知手段,人類大約有超過(guò)80%的信息來(lái)自眼睛。SVIoT雖然是AIoT的細(xì)分領(lǐng)域,但作為AI時(shí)代的主要入口,計(jì)算機(jī)視覺(jué)在AI領(lǐng)域中應(yīng)用場(chǎng)景極其豐富,也是極具商業(yè)化價(jià)值的賽道。
而視覺(jué)產(chǎn)業(yè)也的確率先進(jìn)入爆發(fā)期。智慧家庭、數(shù)字城市、智能門鈴、安防監(jiān)控、車規(guī)感知、工業(yè)視覺(jué)、視頻會(huì)議、3D視覺(jué)、可視醫(yī)療、體感娛樂(lè)、服務(wù)機(jī)器人等。當(dāng)前最熱的典型市場(chǎng),都有SVIoT的身影,聚焦之下,脫穎而出。
SVIoT以視覺(jué)成像、視頻處理、AI算法分析、可控成本、低功耗,端云互聯(lián)和大數(shù)據(jù)為核心技術(shù),比傳統(tǒng)IoT發(fā)展更快,技術(shù)含量更高。
SVIoT對(duì)芯片的要求更高,一般的MCU+WIFI難以滿足性能需求,而手機(jī)AP的成本又過(guò)于冗余,這個(gè)賽道適合真正掌握核心IP的公司,對(duì)實(shí)力與執(zhí)行力要求極高。
君正正是這樣一家聚焦SVIoT賽道的芯片公司,他們提供從芯片,到AI算力,到開發(fā)平臺(tái),到算法整合一體化解決方案。
如今,君正在SVIoT賽道的芯片已經(jīng)大規(guī)模地出貨。
扎根智能視覺(jué)領(lǐng)域多年,合肥君正專門為SVIoT設(shè)計(jì)了一款芯片T40。
“在AI安防領(lǐng)域,T40是中高端產(chǎn)品最佳的替代者?!?/p>
在電池類攝像頭,合肥君正已經(jīng)拿下了市場(chǎng)50%以上的份額,在合肥君正看來(lái),這款T40加持下,這一數(shù)據(jù)有望再升高。
T40針對(duì)SVIoT專門定義了規(guī)格:
1. XBurst2 雙核CPU
2. 星光監(jiān)控級(jí)雙攝ISP
3. 4K(2169P)視頻編碼
4. 最大8T算力AI-Engine
5. 內(nèi)置DDR
6. 支持1080P屏顯
7. 最大功耗小于1.2W(含DDR)
用了雙核XBurst2及增強(qiáng)RISCV協(xié)處理器的T40,啟動(dòng)速度、性能、功耗、首幀效果上進(jìn)一步提升。8T算力的AIE NPU,讓T40在同級(jí)別芯片中算力遙遙領(lǐng)先。4K視頻和ISP能力,豐富的前后IO接口,完全覆蓋各種差異化視覺(jué)應(yīng)用。
全場(chǎng)景,全天候,高質(zhì)量的成像能力,是T40的看家本領(lǐng)。
君正視頻事業(yè)部IC總監(jiān)Jerry告訴AI掘金志,針對(duì)一些效果上的行業(yè)痛點(diǎn),T40的ISP做了針對(duì)性增強(qiáng)。例如光源矯正、膚色還原、3D降噪去拖影、銳化提升、ADR自適應(yīng)、全局通透增強(qiáng)、WDR/HDR、色噪降噪、強(qiáng)光抑制、雙目合成等等方面,T40均進(jìn)行了大量有效突破。
T40 WDR效果,人臉與遠(yuǎn)景清晰可見,暗處細(xì)節(jié)豐富;
T40星光夜視全彩,亮度≤0.01lux,噪聲平緩,色彩豐富,細(xì)節(jié)清晰。
最高可達(dá)8T算力,這是T40的一大殺手锏,這得益于背后的AI引擎(AIE)。據(jù)悉,在目前同級(jí)芯片上,這個(gè)算力是業(yè)內(nèi)最高的。
“這源自君正十多年對(duì)CPU/多媒體計(jì)算技術(shù)的深入掌握,AIE實(shí)現(xiàn)了超高算力,超低功耗,超強(qiáng)靈活性,這是業(yè)內(nèi)難以復(fù)制的獨(dú)特優(yōu)勢(shì)?!?/p>
AI-Engine(AIE)是君正一整套的AI加速引擎,AIE引用了多種DSA的設(shè)計(jì)理念,實(shí)現(xiàn)了對(duì)DL/CV算法多維度的加速:
T40上的AIE規(guī)格如下:
最高8T ops算力,int16/in8/int4/in2混合量化,實(shí)測(cè)利用率可達(dá)70%以上;
512bit SIMD向量加速指令集,使用靈活;
協(xié)處理器單元,優(yōu)化前后處理;
高效RAM pool,深度優(yōu)化內(nèi)存帶寬吞吐;
實(shí)測(cè)運(yùn)行功耗低于500mW,能耗比最低達(dá)到了0.05W/T級(jí)別。
Magik是一個(gè)面向端側(cè)AI應(yīng)用的全棧式開發(fā)平臺(tái),除了基本的工具鏈還包含其他豐富的輔助開發(fā)資源,并且支持后量化和更先進(jìn)的量化感知訓(xùn)練(QAT)。
Magik集模型訓(xùn)練、優(yōu)化轉(zhuǎn)換、部署推理于一體,并提供模型檢查器、調(diào)優(yōu)器、性能分析器等工具:
全面支持pytorch/tensorflow/mxnet/caffe/onnx等主流框架;
支持量化感知訓(xùn)練(QAT)和后量化;
支持2/4/8/16精度混合訓(xùn)練及轉(zhuǎn)換優(yōu)化;
開放常見算法全流程代碼,以及經(jīng)典網(wǎng)絡(luò)的backbones。
端級(jí)算法本身呈現(xiàn)多樣性,碎片化的客觀現(xiàn)狀,合肥君正利用AIE+Magik,能有效突破端側(cè)AI的算力瓶頸,獲得明顯的產(chǎn)品落地優(yōu)勢(shì):
MAC利用率提升1到2倍,推理速度提升2到4倍;
算法運(yùn)行的RAM/ROM消耗減少50%~70%;
帶寬降低35%~85%;
發(fā)熱減少40%~80%。
君正算法總監(jiān)Sandy評(píng)價(jià)Magik時(shí)認(rèn)為:“算力和工具只是基礎(chǔ),真正能把算法落地到各種場(chǎng)景中,并取得成本、效率、功耗等多方面的優(yōu)勢(shì)才是王道!”
據(jù)了解,AIE+Magik已經(jīng)成功服務(wù)了超過(guò)幾十家客戶,包括一些行業(yè)知名品牌、傳統(tǒng)算法公司、行業(yè)監(jiān)控企業(yè)、大型互聯(lián)網(wǎng)品牌、電信運(yùn)營(yíng)商以及初創(chuàng)極客。
君正聯(lián)合了一系列算法合作伙伴,針對(duì)各種場(chǎng)景提供了完整的算法賦能方案,極大地加速產(chǎn)品落地過(guò)程。目前與君正T40直接或間接合作的有一系列算法供應(yīng)商、十多家場(chǎng)景應(yīng)用廠家,相關(guān)大小項(xiàng)目過(guò)百。
在各方合作之下,基于T40應(yīng)用廠商可快速出新算法,如此,在產(chǎn)業(yè)這條多米諾骨牌下,廠商得以快速覆蓋新場(chǎng)景,賦能新行業(yè)。
在傳統(tǒng)應(yīng)用上,如車輛識(shí)別、車牌識(shí)別、行人檢測(cè),人臉識(shí)別,文字識(shí)別、周界防范、物品檢測(cè)、移動(dòng)偵測(cè)等已經(jīng)十分成熟,除此之外,另有許多新穎創(chuàng)新的場(chǎng)景正在陸續(xù)量產(chǎn)中,如家庭與寵物識(shí)別、槍球聯(lián)動(dòng)、OCR、骨骼行為分析等。
Sandy表示:“Magik到目前已經(jīng)成功服務(wù)了十幾家算法客戶,我們客戶最快的記錄是兩周完成一個(gè)算法的移植?!?/p>
功耗,是智能硬件領(lǐng)域永恒不變的話題。
低功耗,是君正長(zhǎng)期內(nèi)在的技術(shù)基因之一。從早年的教育電子/PMP,到之前的可穿戴腕表,再到當(dāng)前的SVIoT,君正芯片歷來(lái)是功耗的佼佼者。T40理所當(dāng)然地沿襲了這一優(yōu)勢(shì)。
T40在AI算力全開的情況下,功耗仍能控制在優(yōu)秀范圍。根據(jù)不同場(chǎng)景,實(shí)測(cè)功耗數(shù)據(jù)如下:
其中AI引擎的推理功耗小于500mW,最低能耗比達(dá)到了震撼的0.05W/T級(jí)別。
關(guān)于功耗,Jerry表示:“過(guò)去幾年,在功耗方面的PK,T系列芯片暫時(shí)還沒(méi)有輸過(guò)?!?br/>
基于T40,君正提供了各種完整的方案參考、軟件代碼、第三方算法以及云平臺(tái)資源,包括AI智能安防相機(jī)方案、低功耗攝像機(jī)方案、槍球聯(lián)動(dòng)方案、VSLAM方案、人臉面板方案、視頻會(huì)議方案等。不知不覺(jué)間,優(yōu)質(zhì)的服務(wù)成為了君正在智能視覺(jué)市場(chǎng)的核心競(jìng)爭(zhēng)力之一。
在半導(dǎo)體供應(yīng)緊缺的大背景下,君正為相關(guān)產(chǎn)品調(diào)好了一些可以無(wú)縫切換的外圍物料,最大程度降低了因缺貨帶來(lái)的不利影響。
同時(shí),君正全力保證T40的供貨安全。針對(duì)供貨情況,合肥君正中國(guó)區(qū)市場(chǎng)總監(jiān)Mick表示:“T40正好避開了上游供應(yīng)的重災(zāi)區(qū),未來(lái)大規(guī)模供貨我們很有信心,歡迎客戶積極開案!”
憑借著芯片性能、AI算力、開發(fā)環(huán)境、超低功耗、成熟方案以及供貨安全等諸多優(yōu)勢(shì),T40將在SVIoT新賽道上踏浪前行。
雷鋒網(wǎng)雷鋒網(wǎng)雷鋒網(wǎng)
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。