專注于“仿生眼球”——?jiǎng)討B(tài)視覺(jué)傳感器（Dynamic Vision Sensor，簡(jiǎn)稱DVS）研發(fā)的芯侖科技，近期推出了其在消費(fèi)電子領(lǐng)域的第一個(gè)應(yīng)用：超低功耗、超低延遲動(dòng)態(tài)感知方案，并將在明年3月進(jìn)入量產(chǎn)級(jí)流片。

芯侖科技成立于2017年7月，一直致力于仿生視覺(jué)感知技術(shù)的研發(fā)，推動(dòng)機(jī)器視覺(jué)由圖片驅(qū)動(dòng)到事件驅(qū)動(dòng)的改變。這家年輕的初創(chuàng)公司背后有著深厚的技術(shù)積淀：創(chuàng)始人陳守順博士為新加坡南洋理工大學(xué)電機(jī)和電子工程學(xué)院的終身教授，從事智能圖像傳感器以及成像系統(tǒng)，遙感成像系統(tǒng)，混合信號(hào)集成電路領(lǐng)域的研究近二十年，曾主導(dǎo)過(guò)新加坡政府的納米型衛(wèi)星載荷系統(tǒng)的開(kāi)發(fā)。動(dòng)態(tài)視覺(jué)傳感器技術(shù)的研究可追溯到2003年，陳教授在香港科技大學(xué)讀博期間；2012年他完成了第一代芯片CELEX-I（64x64）的研發(fā)；截止目前已成功流片五次，第五代CELEX-V（1280x800）代表了事件驅(qū)動(dòng)感知在全球范圍內(nèi)的最高技術(shù)水平。

CELEX與傳統(tǒng)相機(jī)的區(qū)別在于：該傳感器無(wú)需曝光，通過(guò)連續(xù)不斷地采樣像素上自然光的變化（即“事件”），自動(dòng)過(guò)濾靜止的背景數(shù)據(jù)，從而成千倍的節(jié)省運(yùn)算，降低系統(tǒng)成本，使實(shí)時(shí)處理更易商業(yè)化。                   

傳統(tǒng)相機(jī)輸出

CELEX動(dòng)態(tài)視覺(jué)傳感器輸出

它具有以下特點(diǎn)：

1、超高速納秒級(jí)反應(yīng)，可實(shí)現(xiàn)高速運(yùn)動(dòng)物體的實(shí)時(shí)捕捉和追蹤；

2、高動(dòng)態(tài)范圍，能在大范圍光照環(huán)境下工作；

3、低數(shù)據(jù)流，無(wú)變化不輸出；

4、片上光流：傳感器直接輸出物體運(yùn)動(dòng)的矢量信息，使得物體追蹤和識(shí)別更加容易，大幅減少后端信號(hào)處理的復(fù)雜度和能耗。

基于以上核心技術(shù)優(yōu)勢(shì)，芯侖團(tuán)隊(duì)不斷探索動(dòng)態(tài)視覺(jué)傳感器在機(jī)器視覺(jué)領(lǐng)域的應(yīng)用，為下游客戶提供傳感器+算法的解決方案，積極推動(dòng)研究成果走向商用。目前主要關(guān)注兩大業(yè)務(wù)方向：

其一是智能汽車(chē)感知模塊，包括ADAS、車(chē)內(nèi)人機(jī)交互、SLAM等應(yīng)用，尤其是針對(duì)ADAS，基于CELEX的感知方案可顯著提高智能駕駛汽車(chē)在面對(duì)前方緊急情況時(shí)（如行人/電動(dòng)車(chē)突然高速切入的“鬼探頭”場(chǎng)景）的反應(yīng)速度，大幅提升安全水平。

“鬼探頭”造成的交通事故

CELEX能實(shí)時(shí)捕捉到突然出現(xiàn)的人物目標(biāo)，安全性能顯著優(yōu)于傳統(tǒng)方案

其二便是此次推出的消費(fèi)電子解決方案，包括家電、安防、手機(jī)等市場(chǎng)的手勢(shì)識(shí)別和人體識(shí)別。

以手勢(shì)識(shí)別為例，目前市面上的視覺(jué)手勢(shì)識(shí)別方案有普通相機(jī)和深度相機(jī)兩種。普通相機(jī)的硬件成本較低，但因其過(guò)分依賴圖像特征匹配，受環(huán)境光影響大，抗干擾性差。而以TOF和結(jié)構(gòu)光為代表的技術(shù)能獲得深度信息，計(jì)算量相對(duì)較小，但受到硬件成本和功耗的限制，目前主要應(yīng)用在部分汽車(chē)和專業(yè)AR/VR設(shè)備上。以上兩種方式都基于“幀”成像的原理，以固定的采樣頻率獲取信息造成幀間信息丟失，處理較快的運(yùn)動(dòng)就需要提高幀率，依賴較高算力支持。

芯侖的動(dòng)態(tài)視覺(jué)傳感器方案有望改變這一現(xiàn)狀。連續(xù)的納秒級(jí)反應(yīng)速度可在動(dòng)作發(fā)生的瞬間準(zhǔn)確捕捉，降低感知延遲；高動(dòng)態(tài)范圍，不受環(huán)境光劇烈變化影響；排除了靜態(tài)背景信息的干擾，計(jì)算量大幅下降；同時(shí)可利用芯片自帶的光流信息進(jìn)行手勢(shì)跟蹤，顯著提升準(zhǔn)確率和魯棒性。與“傳統(tǒng)攝像頭+ AI芯片”動(dòng)輒幾百毫秒的功耗、幾十毫秒的延遲不同，芯侖嵌入式方案可在僅僅數(shù)毫瓦的功耗下實(shí)現(xiàn)幾毫秒的超低延遲，使得手勢(shì)識(shí)別在消費(fèi)電子級(jí)的大規(guī)模應(yīng)用成為可能。目前市面上有多款手機(jī)已經(jīng)配備了手勢(shì)傳感器，未來(lái)手勢(shì)操作有望成為標(biāo)配，動(dòng)態(tài)視覺(jué)傳感器可大展身手。

CELEX點(diǎn)云狀信息輸入顯著減少數(shù)據(jù)量和算力消耗

 

CELEX手勢(shì)識(shí)別

CELEX手部追蹤（一）

 

CELEX手部追蹤（二）

同樣地，該技術(shù)還可衍生應(yīng)用在身體動(dòng)作識(shí)別上。步態(tài)識(shí)別是一種新興的生物特征識(shí)別技術(shù)，具有非接觸、遠(yuǎn)距離和不易偽裝的優(yōu)點(diǎn)，也可起到快速識(shí)別外來(lái)可疑人物，大幅減少誤報(bào)的作用。動(dòng)態(tài)視覺(jué)傳感器在時(shí)間域上連續(xù)的特性，特別適合分析一段時(shí)間內(nèi)的運(yùn)動(dòng)，可實(shí)現(xiàn)低功耗、快速姿態(tài)算法。

在監(jiān)控領(lǐng)域，除以上優(yōu)勢(shì)之外，動(dòng)態(tài)視覺(jué)傳感器去除了所有運(yùn)動(dòng)以外的圖像信息，具有保護(hù)用戶隱私的特點(diǎn)，很適合金融、政府、科研、涉密機(jī)構(gòu)、企業(yè)等高保密場(chǎng)所的要求；也非常適合家用場(chǎng)合安防或智能看護(hù)應(yīng)用。日前，三星剛剛推出了其第一個(gè)基于DVS授權(quán)技術(shù)的產(chǎn)品——智能家居監(jiān)控“SmartThings Vision”，售價(jià)149美元，正是主打這一賣(mài)點(diǎn)。與三星相比，芯侖在自主芯片開(kāi)發(fā)上的優(yōu)勢(shì)使其具有三倍高于對(duì)方的分辨率和前所未有的片上光流性能，產(chǎn)品性能優(yōu)勢(shì)更加凸顯。

近年來(lái)，類(lèi)腦計(jì)算已經(jīng)漸漸為人所熟知，而類(lèi)眼視覺(jué)作為其中一個(gè)分支，仍是計(jì)算機(jī)科學(xué)的前沿，具有很高的技術(shù)門(mén)檻。芯侖科技作為國(guó)內(nèi)這一領(lǐng)域的先驅(qū)者，不但將動(dòng)態(tài)視覺(jué)傳感器帶入我們的視野，更不斷探索其應(yīng)用，推動(dòng)顛覆性前沿技術(shù)的商業(yè)化落地。從智能駕駛到消費(fèi)電子，這家公司屢次讓人眼前一亮，讓我們看到了國(guó)內(nèi)自主技術(shù)國(guó)際領(lǐng)先的可能性，更看到了中國(guó)初創(chuàng)企業(yè)在產(chǎn)品化落地上的靈活思路和雷霆速度。目前已有多家家電、安防、手機(jī)頭部企業(yè)與芯侖達(dá)成合作，預(yù)計(jì)明年可大規(guī)模量產(chǎn)。

雷峰網(wǎng)版權(quán)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。