0
本文作者: 張瑞 | 2019-03-29 17:25 | 專題:2019中國人工智能安防峰會 |
3月23日,由雷鋒網(wǎng) & AI掘金志主辦的「第二屆中國人工智能安防峰會」在杭州召開。
峰會現(xiàn)場,千視通CTO胡大鵬以《智慧園區(qū),無感通行》為主題,全面深入地分享了千視通AIoT場景融合戰(zhàn)略。
胡大鵬博士是香港科技大學計算機科學博士,曾任微軟亞研院博士后研究員、ASTRI(香港應(yīng)用科學研究院)首席研究員,作為千視通的聯(lián)合創(chuàng)始人兼CTO,參與制定了千視通AIoT場景融合戰(zhàn)略。
胡大鵬博士在大會中提到,AIoT場景融合戰(zhàn)略由AI算法、IoT智能前端/邊緣計算、大數(shù)據(jù)平臺、NVR/服務(wù)器等組成,可將Re-ID和Face-ID兩大算法進行融合應(yīng)用,賦能智慧園區(qū)、社區(qū)、校園、零售等多個場景,實現(xiàn)無感通行。
以下為胡大鵬博士的現(xiàn)場演講內(nèi)容,雷鋒網(wǎng)作了不改變原意的編輯和整理:
大家好!我是胡大鵬,今天我主講的內(nèi)容是《智慧園區(qū)、無感通行》。
作為聯(lián)合創(chuàng)始人創(chuàng)辦千視通之前,我曾在微軟亞研院、ASTRI工作。目前,千視通的核心研發(fā)團隊都是來自于香港科研院、北美以及上海交通大學的專家。
千視通與其他AI公司有所不同?,F(xiàn)在業(yè)內(nèi)頭部的AI公司大多都聚焦于單點人臉識別和Re-ID技術(shù),我們除了深耕這兩項技術(shù)外,目前也在把這兩項進行融合,實現(xiàn)“無感”,業(yè)務(wù)邏輯是把人與場景融合在一起,打造“無感園區(qū)”。
現(xiàn)在,我們?yōu)橛脩籼峁〢IoT端到端的全棧解決方案,同時借助佳都科技、川大智勝、比特大陸、明略數(shù)據(jù)四大股東的資金與資源加持,使得千視通有能力承接完成大量的諸如“無感園區(qū)”類型的數(shù)千萬級項目。
千視通的AIoT主要包含四個方面:AI算法、IoT智能前端/邊緣計算、大數(shù)據(jù)平臺、NVR/服務(wù)器。
算法層面,大家都知道千視通最初是做Re-ID和人臉識別的,在這些項目的研發(fā)期間,拿到了非常好的數(shù)據(jù),現(xiàn)在可利用這些實戰(zhàn)數(shù)據(jù)和技術(shù)積累去做無感通行。
目前千視通主要聚焦在前端中心,公司儲備的大部分算法,都在人臉、IPC、系統(tǒng)增強等領(lǐng)域,這些算法現(xiàn)階段已經(jīng)非常成功地嵌入在了前端,可直接應(yīng)用。
在AIoT領(lǐng)域,我們也可以去賦能老舊、普通的IPC(后端也需要硬件和平臺的支持),我們現(xiàn)在做的主要是加強AI和前端層,從而演變成全線的端到端方案。
千視通的AIoT方案可以用在什么場景呢?園區(qū)、社區(qū)、校園還有零售。今天我主要講前三個,零售的技術(shù)邏輯與上述三者也較為相似。
什么是無感通行?
在講無感通行前,我先談?wù)勂胀▓@區(qū)管控中通常會遇到的問題,主要分為四種:
1.安全管理有漏洞:當人進入園區(qū)時,需要刷臉或刷卡,但這些環(huán)節(jié)都可以通過造假入內(nèi)。
2.布控識別存在盲區(qū):進入園區(qū)后,很多地方一方面沒有攝像頭,另外即便有攝像頭也僅可以實現(xiàn)把人檢測出來,或者是用Re-ID把人在不同的系統(tǒng)里進行關(guān)聯(lián),但并不能建檔,所以無法知道這個人是誰。對此,我們把Re-ID和Face-ID融合起來,除了從不同的系統(tǒng)里拿到這個人的樣貌和外形信息之外,我們也把他的身份信息復(fù)制進去。
3.園區(qū)成本改造成本高:很多園區(qū)仍在使用老舊硬件設(shè)備和軟件系統(tǒng),如要進行改造,成本會很高。
4.事件預(yù)防能力弱:現(xiàn)階段大多設(shè)備對事件的預(yù)防能力比較弱,單從火災(zāi)預(yù)警來講,若采用普通的IoT硬件,需要安裝很多傳感器,如溫度傳感和煙霧傳感等,但各種設(shè)備的能力范圍有限,感知的場景和采集的數(shù)據(jù)單一,遠不如攝像頭。
在這種情況下,我們的解決方案分為四點:分別是無感通行、一人一檔、利舊建新、火情檢測。
無感通行
什么是“無感通行”呢?當你進入一個園區(qū)之后,我不希望用戶知道你在管理他,他不需要主動刷臉刷卡,他一入園區(qū)后,在不干擾他的情況下,利用攝像頭先對用戶進行識別,然后把他的資料和屬性調(diào)出來,根據(jù)他的身份,對園區(qū)進行智能管控,對用戶提供通行服務(wù),所以叫“無感通行”。
一人一檔
如果我可以把每個人的ReID關(guān)聯(lián)起來后,再把人臉信息加進去,就可以在底庫里面把他的身份信息拿出來,然后再進行關(guān)聯(lián),在此之上,便可以為每個人建檔。
建檔之后的任務(wù),千視通自身已經(jīng)做了很多優(yōu)化工作,比如把所有人的信息分解出來,然后建一個檔,檔案里包括了用戶的所有信息:身份、屬性、每個時間段出現(xiàn)的位置、所做的事情,這之后也可以衍生出更多的應(yīng)用。
利舊建新
我們的產(chǎn)品可以稱作為“利舊建新”,這么叫的原因是希望把原來的普通IPC,在后臺加一個盒子,或者再臺服務(wù)器,從而把攝像機的能力,變得更智能。
火情檢測
最后是事件監(jiān)測,我們做的一款產(chǎn)品叫“火情檢測”。
無感同行通過2D或者3D地圖,然后在地圖里把無感通行里檢測的所有人和事都進行重建,然后把他顯示出來,我們甚至可以建立一人一檔,可以知道這個人在園區(qū)里怎么走動、也可以知道他的身份,在每個點里都能實時把這些人檢測出來,然后把他分辨率最高的抓拍人像,跟人形去做關(guān)聯(lián),使得他在園區(qū)攝像頭下的所有行為我們都可以掌握。
知道這些信息后,然后進行統(tǒng)計建模。
比如可以把園區(qū)行人的資料跟公安黑名單進行對比,如果識別出某人是逃犯,就可以實時自動關(guān)閉園區(qū)大門,然后通知警方和管理人員辦案。
下圖是千視通做了很多年的屬性提取和分類,隨著屬性的顆粒度越來越細、越來越多,識別精度越來越準。
那么人形Re-ID和人臉Face-ID怎么做呢?
人每經(jīng)過一個地方,如閘機或門禁,在門禁里,我可以采集到他非常清晰的照片,經(jīng)過一些卡口時,整個人也可以看清楚,但如果在其他地方,就可能看不清楚他的人臉。那么在這種采集不到高清照片的場景下該怎么辦?
在園區(qū)里我們實時從不同場景和不同的設(shè)備上,采集人的各種人臉圖像和人形軌跡,最后用底層的算法,把多個維度的信息和屬性進行關(guān)聯(lián),屬性越多,檔案便建得越完善。
當然了,由于整個采集流程是無感的,所以采集的圖像有時候質(zhì)量不一定非常好,這時候需要我們用非常復(fù)雜的算法進行圖像增強,比如通過超分辨率識別技術(shù)實現(xiàn)低清人臉的識別,從而進行高清人臉以及進行身份比對。
另外,我們在側(cè)臉還原技術(shù)上也有著很好的積累,針對只抓拍到的側(cè)臉數(shù)據(jù),從而根據(jù)側(cè)臉的信息,把正面的特征提取出來,進行圖像修補和增強,提高精確度。
如果是晚上怎么辦?在園區(qū),現(xiàn)在有超夜視增強識別技術(shù),可以把算法嵌入在前端的AI芯片里,把黑暗無光的照片進行恢復(fù),然后進行分析?,F(xiàn)在這個系統(tǒng)理論上可以24小時工作。
最后是剛才提到的一人一檔,每個人的資料都在這里。有了這些資料以后,我們系統(tǒng)有些標準的應(yīng)用,類似于黑名單報警、陌生人報警、圍欄報警、未授權(quán)區(qū)域報警、訪客超時報警、人形屬性報警,這些都可以做。
我們前端是允許普通的IPC連接到我們的盒子,或者是在后臺的機器里做分析,還可以買我們設(shè)計的攝像頭,千視通已經(jīng)有一些算法,也可以提供一些標本配備,比如與閘機或者是訪客機,以及加上人臉終端去提升性能。
我們園區(qū)的方案,包括五個模塊中心:
智慧園區(qū)管理中心:我剛才提到的分析、儲存環(huán)節(jié)都是這個中心在做處理。
門禁閘機控制和視頻監(jiān)控系統(tǒng):這兩個產(chǎn)品形態(tài)比較簡單,主要是控制硬件。
遠程訪問權(quán)限控制:這個模塊很重要,園區(qū)如果有人過來訪問,可以預(yù)先在網(wǎng)上登記,登記之后,進入這個園區(qū)即可。后臺授權(quán)也有一些功能,管理員可以根據(jù)你的身份,自動設(shè)置你哪些地方可去,哪些地方不能出去,以及獲取訪問時間等。
車輛管理子系統(tǒng):車輛管理子系統(tǒng)也差不多,只不過對象不是人,是車。
警報信息發(fā)布系統(tǒng):管理員可以在系統(tǒng)里定義哪些行為違規(guī)、什么可做、不可做,如果有違規(guī)事項發(fā)生,及時報警。
以上主要是我們無感園區(qū)要做的事情,我們盡可能在不干擾用戶的情況下,把一人一檔建起來,這是我們無感通行里最重要的一點。
如果把無感通行擴大,可以做什么事情呢?
我們發(fā)現(xiàn)在社區(qū)的管理上有三個很大的問題,第一個是外來人口不斷增多,特別是在一些正在快速發(fā)展的城市,流動人口基數(shù)很大,管理工作人員少、信息管理滯后。
千視通近來在廣州花都區(qū)有一個項目,這些園區(qū)本身有一些門禁系統(tǒng),還裝有不少攝像頭,但他們就不太愿意把這些舊的設(shè)備全都換掉,希望在保留舊設(shè)備的基礎(chǔ)上,打造成一個智能社區(qū)。以前很簡單,直接連到我們后臺或者盒子等產(chǎn)品,老產(chǎn)品都可以變智能。
當這些項目做大以后,我們就可以把這些小區(qū)變成酒店式管理。
小區(qū)里的人在什么地方,做什么事情系統(tǒng)都可以知道,他原有的門禁,也知道有什么人在里面,所有門禁采集的資料會送到后臺中央來處理,再加上一些攝像頭做的Re-ID和Face-ID的融合,基本可以實現(xiàn)一人一檔。它首先可以統(tǒng)計人口信息,然后是房屋信息,知道房子里面有什么人住,現(xiàn)在有什么人在里面。然后是出入信息,我們可以知道處于這個門禁的哪個位置,他在社區(qū)里面跑,通過多個攝像頭融合,系統(tǒng)也可以把他的位置找出來。
在一人一檔里面已經(jīng)有這個資料了。然后在每個攝像頭位置都可以抓拍他的信息,從這里也可以拿到他的短視頻,就可以全都管理和控制。
下一個是校園,為什么提它?
近來我們發(fā)現(xiàn)有學校開始布一些傳感器之類的智能產(chǎn)品,輔助校園管理。我覺得在學校里面,有四個問題需要解決:
包括校園進出問題、陌生人進入宿舍問題、學生接送冒領(lǐng)問題、學生逃課問題。
我們?nèi)W校充分了解了其需求,他們有學生接送管理、校門進出人員管理、宿舍人員進出管理以及課堂出勤管理,如果我們可以對每個學生都建一人一檔,這些事情的管控都不難。
對于家長來說,他感受到的是什么呢?因為每個學生,系統(tǒng)都知道他的檔案、姓名、班級、學校、時間、位置,每個時間段在做什么事情,他附近有什么人。
我可以提供一個手機APP給家長,家長如果沒有時間去接送,可以在這里授權(quán)某個人去,在這里登記,就像剛才園區(qū)一樣,可以在里面先登記,然后這個人就可以去接送了。
接送也可以警報,到底是誰在接送你的孩子,還有接送的畫面、短視頻都可以看到。另外一個是你孩子在課堂,有沒有上課,有沒有參與,也都可以知道。這對家長來說非常方便,重點是無感,所有人完全不需要刻意配合,也不需要受到干擾,體驗很好。
總結(jié)來說,我們千視通主要的AIoT有什么呢?
主要分為四部分:尖端的算法、前端嵌入式方案、大數(shù)據(jù)平臺基礎(chǔ),NVR/服務(wù)器,基于這四點,就可以做到無感通行,一人一檔、利舊建新,還有事件檢查等。我們的AIoT可以用在園區(qū)、社區(qū)、校園,還有零售等場景應(yīng)用,未來可探索的場景更多,因此我們也需要更多的時間去挖掘。
這是我們公司的宗旨,希望我們用人工智能,讓城市更加安全、便捷、智慧,謝謝大家!
由雷鋒網(wǎng)& AI掘金志主辦的「2019中國人工智能安防峰會」,是業(yè)內(nèi)極具影響力的AI安防論壇,致力于推動中國“AI-安防”落地融合與“學術(shù)-產(chǎn)業(yè)”的應(yīng)用交叉。
延續(xù)上一屆峰會的高水準、高人氣,2019中國人工智能安防峰會再度站在算法、工程和產(chǎn)品的最前沿,引導(dǎo)安防行業(yè)認知再升級。這是???、大華、華為、阿里、騰訊以及多個AI獨角獸,因“AI安防”首次同臺,峰會現(xiàn)場也聚集了海內(nèi)外1000多位政企管理層和技術(shù)研究員,共同探討2019年的AI安防智能技術(shù)部署、前沿算法應(yīng)用與商業(yè)戰(zhàn)略布局。
本次峰會共設(shè)置“城市大腦與邊緣計算”、“世界頂尖算法應(yīng)用”、“前端動態(tài)識別與智能視頻云”、“城市AIoT與邊緣智能引擎”四大議題,出席的15位演講嘉賓分別是:
上午場:阿里巴巴華先勝、海康威視浦世亮、大華股份殷俊、地平線張永謙、深瞐科技陳瑞軍、商湯科技張果琲、浪潮商用機器張琪。
下午場:香港科技大學權(quán)龍、原松下(新加坡)研究院申省梅、華為余虎、觸景無限肖洪波、曠視科技安洋、千視通胡大鵬、騰訊李牧青、中科院自動化所王金橋。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。