4
| 本文作者： 亞萌 | 2016-12-06 22:46 |
今天的Amazon Go刷爆了國(guó)內(nèi)外的社交媒體。
Amazon Go令人驚艷的地方，就是你可以徑直走進(jìn)超市，選好貨品之后立馬離開，不用在收銀臺(tái)前排長(zhǎng)長(zhǎng)的隊(duì)伍，等待結(jié)賬。
甚至還莫名有一種從商店“搶劫”的快感。
我們說，移動(dòng)支付顛覆了既有商品交易方式，那么這種“搶劫式”的Amazon Go甚至連“交易感”都消滅了。
總之，人們被這種新奇的似乎隱含了某種黑科技的新型購(gòu)物方式所吸引。不僅是普通人，就連斯坦福教授李飛飛、著名科技出版公司O'reilly創(chuàng)始人Tim O'Reilly都特地發(fā)推點(diǎn)贊。
李飛飛：計(jì)算機(jī)視覺十分顯著和絕妙的應(yīng)用！
Tim O'Reilly：零售業(yè)的未來，我對(duì)此已經(jīng)期待很多年了。
用戶進(jìn)入商店，穿過閘機(jī)的時(shí)候打開手機(jī)讓其識(shí)別，這時(shí)手機(jī)里的系統(tǒng)啟動(dòng)，并隨時(shí)準(zhǔn)備更新物品清單。令人驚艷的部分就是，在用戶拿走或放回物品的一瞬間，手機(jī)里的系統(tǒng)會(huì)自動(dòng)更新清單。最后，用戶拿著物品滿意地離開，手機(jī)自動(dòng)扣款。
這里面到底有什么黑科技呢？就官方發(fā)布的視頻來看，技術(shù)亮點(diǎn)有三個(gè)：機(jī)器視覺、深度學(xué)習(xí)算法和傳感器融合。
但僅有這幾個(gè)關(guān)鍵詞還是不夠的，雷鋒網(wǎng)遂向亞馬遜在職員工進(jìn)行采訪，但是對(duì)方表示Amazon Go還屬于保密項(xiàng)目，公司要求不能對(duì)外透露任何細(xì)節(jié)。
不過在Quora上，有一位名為Brian Roemmele的網(wǎng)友挖出了幾年前亞馬遜提交的兩份專利文件，里面描繪的系統(tǒng)跟如今的 Amazon Go非常相似。這兩份文件名稱為：“偵測(cè)物體互動(dòng)和移動(dòng)”（Detecting item interaction and movement）和“物品從置物設(shè)備上的轉(zhuǎn)移”（Transitioning items from the materials handling facility），兩文件分別于2013年和2014年申請(qǐng)（感興趣的朋友可以在公眾號(hào)回復(fù)關(guān)鍵詞“專利”，下載2份專利文件）。
這兩份專利文件都描繪了十分龐雜的應(yīng)用場(chǎng)景，包括：貨倉(cāng)、船運(yùn)、零售市場(chǎng)等，所以很多人當(dāng)初在看到這份文件時(shí)，都以為這是亞馬遜為自己的倉(cāng)儲(chǔ)系統(tǒng)量身定制的，不過今天一切真相大白。
“偵測(cè)物體互動(dòng)和移動(dòng)”（Detecting item interaction and movement）這份專利的摘要是：
用戶從一個(gè)貨架上拿起或放下一個(gè)物品，貨物管理系統(tǒng)可以偵測(cè)到這個(gè)動(dòng)作，并且更新用戶移動(dòng)設(shè)備里的清單。
“物品從置物設(shè)備上的轉(zhuǎn)移”（Transitioning items from the materials handling facility）這份專利的摘要是：
物品被識(shí)別，并且當(dāng)用戶正在拿起物品時(shí)，物品自動(dòng)與用戶發(fā)生關(guān)聯(lián)。 當(dāng)用戶進(jìn)入或穿過一個(gè)“轉(zhuǎn)移區(qū)”（Transition Area），被拿起的物品將自動(dòng)轉(zhuǎn)移到用戶，而不需要用戶有任何的輸入。
總的來說就是，被識(shí)別的物體與用戶發(fā)生關(guān)聯(lián)，能自動(dòng)更新清單，并在“轉(zhuǎn)移區(qū)”進(jìn)行自動(dòng)交易（“轉(zhuǎn)移區(qū)”在Amazon Go里指的就是商店的出口）。
我們可以從下面一張圖里，一窺 Amazon Go 的基本原型。
圖中代號(hào)為208的物體都是攝像頭，大約有10多個(gè)（有一些被人體擋?。?08攝像頭分別置于天花板（如圖左右兩邊各有一個(gè)比較大的攝像頭）、貨架兩側(cè)和貨架內(nèi)部。文件里描述到，天花板上的208用來采集用戶和貨品的位置、貨架兩側(cè)的208用來捕捉用戶的圖像和周圍的環(huán)境，貨架內(nèi)的208用來確定貨品的位置或用戶手的移動(dòng)（進(jìn)入和離開貨架）。
而從視頻里，我們隱約能夠看到安置在貨架內(nèi)部的攝像頭。
另外，專利文件里還補(bǔ)充道：這里的攝像頭可以是多種類型的，可以是RGB攝像頭，或深度感知攝像頭。除了攝像頭之外，也可以有其他輸入設(shè)備，比如壓力傳感器、紅外傳感器、體積位移傳感器、光幕等等。壓力傳感器可以偵測(cè)物品移出和進(jìn)入的時(shí)間，紅外傳感器可以用來區(qū)分用戶和的手和物品。
我們具體并不清楚Amazon Go到底在多大程度上使用了計(jì)算機(jī)視覺技術(shù)。比如說，當(dāng)用戶進(jìn)出商店時(shí)，都需要對(duì)用戶進(jìn)行識(shí)別，文件里反復(fù)提到可以用人臉識(shí)別技術(shù)實(shí)現(xiàn)，但是又會(huì)繼續(xù)補(bǔ)充說明可以通過手機(jī)等移動(dòng)設(shè)備來偵測(cè)。
Quora網(wǎng)友Anurag Ranjan是一位機(jī)器視覺和深度學(xué)習(xí)領(lǐng)域的準(zhǔn)PhD，他分析稱：
Amazon Go使用商店里的攝像頭識(shí)別出了用戶，可能針對(duì)用戶拍了幾張照片，依靠一些標(biāo)準(zhǔn)的深度學(xué)習(xí)網(wǎng)絡(luò)形成了一幅特征圖，比如Resnet,、GoogLeNet 或者 VGG 這樣的?？傊?，當(dāng)用戶踏進(jìn)店里的那一刻起，Amazon Go就知道用戶長(zhǎng)什么樣了。
但是根據(jù)專利和既有經(jīng)驗(yàn)來看，在整個(gè)過程中用計(jì)算機(jī)視覺來追蹤用戶，代價(jià)太高了。我們大致可以確定的是，貨架上的一排排攝像頭應(yīng)該就是對(duì)用戶進(jìn)行“動(dòng)作識(shí)別”，并且識(shí)別出物體是否被拿走（這里也或許是傳感器實(shí)現(xiàn)的）。
不過整個(gè)過程中的難點(diǎn)是，如何將物品與用戶進(jìn)行唯一綁定？
云從科技高級(jí)算法工程師周翔告訴雷鋒網(wǎng)，Amazon Go具體用到哪些技術(shù)，目前我們只能夠猜測(cè)，他提到可能的實(shí)現(xiàn)機(jī)制是：
通過手機(jī)做到了精準(zhǔn)定位人，然后物體的具體位置可以大概確定，一旦人附近的物品離開，同時(shí)最近的人的ID就會(huì)關(guān)聯(lián)這個(gè)物品ID。
置物架肯定用到了壓力傳感器，一旦物品離開，就會(huì)明確知道什么物品在什么地點(diǎn)離開，一旦物品回來，壓力傳感器同樣會(huì)感應(yīng)到。
深度學(xué)習(xí)可能是學(xué)習(xí)了人的購(gòu)物習(xí)慣，可能用到計(jì)算機(jī)視覺做了人的動(dòng)作識(shí)別，然后根據(jù)物品與人的ID進(jìn)行關(guān)聯(lián)，也就是二次確認(rèn)。同時(shí)分析一個(gè)人的購(gòu)物喜好，推測(cè)他會(huì)買的東西，提前做一些預(yù)判。
周翔提出，可能Amazon Go根本沒有用到人臉識(shí)別的技術(shù)，“國(guó)外對(duì)人臉的隱私權(quán)是比較高的，未經(jīng)允許采集他人的人臉會(huì)被起訴的”。雷鋒網(wǎng)也關(guān)注到，在李飛飛的那篇推文下，有網(wǎng)友對(duì)此持抵觸態(tài)度，認(rèn)為如果是人臉采集，侵犯了自己的隱私。
Amazon Go的出現(xiàn)驚艷了很多人，不過并不是所有人對(duì)此表示歡迎，除了上文提到的隱私問題外，有不少人擔(dān)憂，如果這種技術(shù)大范圍普及（我們知道亞馬遜是多喜歡2B業(yè)務(wù)），大量超市收銀員將會(huì)失去工作，畢竟亞馬遜在視頻里承諾要在 2017年初，于西雅圖上線第一家Amazon Go。
不過這種技術(shù)究竟有多少“實(shí)操性”，還是存在很多的疑惑的，例如：
如果好幾個(gè)人擠到一起買同一類東西（比如商場(chǎng)打折搶貨，這是經(jīng)常發(fā)生的），那么物品與人的ID關(guān)聯(lián)還能保持精準(zhǔn)嗎？
如果用戶把商品放回的位置是錯(cuò)的呢，這樣也會(huì)被收費(fèi)嗎？
如果有人搞怪，將自己家空果汁瓶取代商店里的新鮮果汁，那么Amazon Go識(shí)別的出來嗎？
“所以，這里要求購(gòu)物的人得非常有素質(zhì)才行”，周翔對(duì)雷鋒網(wǎng)說道。我們對(duì)Amazon Go的諸多疑惑，或許過幾個(gè)月就能在西雅圖見分曉。
相關(guān)文章：
深度丨 Yoshua Bengio 得意門生詳解機(jī)器學(xué)習(xí)生成對(duì)抗網(wǎng)絡(luò)（含86頁(yè)P(yáng)PT）
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
