0
2017是蘋果發(fā)力AR的一年,其帶動了2017下半年AR市場的整體發(fā)展。
這一年,CEO庫克在各個場合強推AR,在他看來AR對蘋果的重要性,正如iPhone對蘋果的重要性一樣。
蘋果在AR硬件和軟件上都取得了很多突破。 6月蘋果推出ARKit,使得上億的iPhone設備一夜間擁有高品質(zhì)的AR功能;9月上線搭載ARKit的iOS 11上線至今,App Store中已經(jīng)有超過1000款AR應用;iPhone X搭載專為AR優(yōu)化的A11仿生芯片、原深度攝像頭和神經(jīng)網(wǎng)絡算法;蘋果AR眼鏡將采用獨立芯片、搭載rOS系統(tǒng),最早2020年發(fā)貨。
蘋果要做 AR 早就不是什么新聞,Tim Cook 也多次在公開場合表明看好 AR。WWDC上蘋果公布了自己邁入 AR 領域的第一步——針對 iOS 11 推出 ARKit。
在WWDC上,蘋果演示了宜家用ARKit實現(xiàn)的Ikea Place功能,在你選擇家具的時候,可以直接把虛擬的家具放置在真實的房間中,虛擬家具會按照1:1還原,這樣在購買前就可以很直觀的看到家具的擺放效果。
蘋果還演示了ARKit對Pokémon GO的升級。2016年7月,Pokémon GO火遍全球,上億人加入了這場捕捉虛擬寵物精靈的AR游戲中,感受到AR的魔力。然而,Pokémon GO只是低端的AR應用,其實現(xiàn)方式只是將虛擬物體疊加在手機相機圖像流之上,虛擬寵物精靈只能漂浮在現(xiàn)實世界中,沒有真實可言。ARKit可以使得寵物小精靈站立在地面上,扔出去的精靈球還可以在地面上彈跳,也就是說虛擬物體與真實世界有了互動。
ARKit是蘋果邁入AR的第一步,使得上億設備瞬間擁有AR功能,也使開發(fā)者不需要任何別的工具,可以輕松利用ARKit開發(fā)AR應用。ARKit的推出直接改變了AR技術的格局,AR市場的生態(tài)。
硅谷AR投資人Matt Miesnieks指出,ARKit的基礎技術是視覺慣性測量(VIO)系統(tǒng)、簡單的2D平面檢測。ARKit可以被看成輕便的SLAM系統(tǒng),可以將3D虛擬物體放置在真實的平面中,使得虛擬物體在平面上運動,還可以追蹤用戶的相對運動。而ARKit神奇之處和攻破的難點在于其實現(xiàn)了單目3D成像、計量尺度獲取。(延伸閱讀:大神揭秘:蘋果 ARKit 憑什么碾壓對手?)
ARKit使用的VIO系統(tǒng)其實和市面上已經(jīng)有的Vuforia 、谷歌Tango、HoloLens等沒有差別。雷鋒網(wǎng)了解到,ARKit的VIO技術來自于其收購的FlyBy公司,而該代碼庫已經(jīng)授權給Google,成為 Tango 的 VIO 系統(tǒng)。大神Matt認為ARKit的優(yōu)勢在于蘋果公司可以負擔得起將 VIO 算法緊密耦合到手機傳感器上,并花費很多時間來校準 VIO 系統(tǒng),以減少計算空間位置時產(chǎn)生的誤差。
谷歌Tango早于ARKit,但是Tango是一套獨立的軟硬件設計參考標準,當時支持Tango的只有聯(lián)想的Phab 2 pro和華碩的ZenFone。Google的AR技術積累早于蘋果,但是由于沒有整合好軟硬件,被ARKit搶占了先機。此時,Google顯得十分尷尬,要么推出單目AR SDK,要么強推Tango讓安卓手機硬件升級。
顯然,Google選擇了前者,在8月,Google發(fā)布了ARCore,正式與ARKit開戰(zhàn)。ARCore被看作是輕量級的Tango,可以支持Samsung S8和 Pixel系列手機。Matt認為,“作為技術解決方案,ARKit和ARCore的能力非常接近。ARKit 在集成和跟蹤方面具有一定的技術優(yōu)勢; ARCore 在建圖和重定位方面具有一些優(yōu)勢??墒沁@兩個優(yōu)點大多是專業(yè)的計算機視覺工程師才能看到的?!保ㄑ由扉喿x:大神解讀:谷歌 ARCore 就是低配版 Tango,它比蘋果 ARKit 好在哪?)
庫克在采訪中也回應了ARKit與ARCore的競爭,他說到:“Android的市場更大,但過于分散以至于谷歌無法確定手機新功能的誕生需要多長時間。盡管蘋果和三星一直在爭奪手機市場的第一把交椅,但蘋果的手機銷量遠高于競爭對手。更重要的是,蘋果公司自己打造手機制造軟件和硬件,這使得它在AR和其他領域都處于獨一無二的優(yōu)勢地位。谷歌也在對它的Pixel手機系列做同樣的事情,并整合了良好的虛擬現(xiàn)實功能,但這些手機的銷量并不大?!?/p>
蘋果發(fā)布ARKit支持iPhone 6S及以上機型,瞬間就有上億用戶,而安卓OEM廠商接入ARCore或許還得等上大半年。不難看出,ARKit的推出刺激谷歌發(fā)布ARCore,讓安卓市場也接入AR。但ARKit對AR格局的改變還不止于此。
阿里巴巴天貓互動技術專家蔣佳憶曾發(fā)文分析ARKit對AR眼鏡廠商、AR SDK公司、AR軟件玩家的影響。在他看來,ARKit首先以手機AR的形式教育大眾,對AR眼鏡未來的普及是鋪墊作用。AR SDK玩家比較慘,近一年幾乎所有SDK公司都在基于單目做SLAM算法的研發(fā),而蘋果解決這個問題后,這些玩家智能轉(zhuǎn)而在ARKit基礎上做擴展功能。例如,uSens凌感推出可以適配低端安卓機型的AR技術平臺。AR軟件玩家如Snapchat和Facebook受到影響也很大,Snapchat的World LenseAR功能推出時是創(chuàng)新,F(xiàn)aceU,B612這樣的小玩家有了ARKit之后,就可以立馬實現(xiàn)Snapchat的AR功能。(延伸閱讀:如何評價蘋果在 2017 WWDC 上發(fā)布的 ARKit?)
此外,值得注意的是,國內(nèi)BAT在ARKit推出后,紛紛加入搭建AR技術平臺和落地應用。阿里巴巴、百度、騰訊、網(wǎng)易、京東都紛紛開放了自己的AR技術平臺,這些AR技術平臺將幫助開發(fā)者、企業(yè)更快速地在這些大平臺上實現(xiàn)AR功能。AR能夠真正在落地場景中改變購物、社交和出行。2017年AR的基礎技術和應用生態(tài)迅速鋪開。(延伸閱讀:騰訊詳解 QQ-AR 開放平臺,讓全社會參與進來,專訪趙剛 | BAT 之后,京東為何也加入 AR 戰(zhàn)場?)
9月12日,蘋果新品發(fā)布會發(fā)布了iPhone 8/8 Plus, iPhone X和搭載ARKit的iOS 11以及新的人工智能仿生芯片A11。
整個發(fā)布會,AR占據(jù)了很重要的位置。蘋果營銷副總裁Schiller 稱iPhone X這是“第一款真正為 AR 打造的智能手機”。
此前,普通的手機利用一些AR SDK也能實現(xiàn)AR效果,例如去年春晚的AR搶紅包。在AR場景中,攝像頭是AR的入口。Schiller介紹到,新iPhone的攝像頭專門為 AR 而校準,刷新率達到 60fps,全新陀螺儀和加速計,以及準確的動作追蹤。此外,AR算法對GPU、CPU要求非常高,A11仿生芯片讓 iPhone 的 AR 功能可以更好的實現(xiàn),CPU 可實現(xiàn)較好的追蹤,GPU 能渲染更真實的圖像,以及 ISP 實時光照。
Oglass 蘇波對雷鋒網(wǎng)說:單純從ID(Industrial design)來看,iPhone 8幾乎沒有什么創(chuàng)新之處。但是有了AR功能的iPhone相當于再一次發(fā)明了手機。如同最初,iPhone把功能手機進化為智能手機。這一次,智能手機又將進化到AR機。
WWDC上ARKit的推出讓大家看到了蘋果在AR技術上的實力,而在此次的新品發(fā)布會,蘋果在軟件和硬件兩方面的AR布局更為清晰。很多業(yè)內(nèi)人士相信,蘋果或許會打造出一套新的AR操作系統(tǒng)。(延伸閱讀:蘋果大舉押注AR,或?qū)⑶藙诱麄€行業(yè)?)
前面分析的都是硬件、軟件的基礎技術進展,而ARKit給用戶的生活帶來改變還得看內(nèi)容。發(fā)布會上,蘋果展示了四款基于ARKit打造的內(nèi)容。兩款AR游戲《The Machines》和《Warhammer 40k:Free Blade》,MLB(美國職棒大聯(lián)盟)的《At Bat》,還有一款可以看星星的《Skyguid》。
(《The Machines》游戲畫面)
《The Machines》由上海創(chuàng)業(yè)團隊Directive Games打造?!禩he Machines》是一款即時戰(zhàn)略游戲,可支持兩名玩家在戰(zhàn)場上控制各自的英雄,對抗和消滅對方的基地和防御塔。這款游戲在China Joy演示時,一些玩家興奮地圍著桌子跑來跑去。
AR游戲不僅使得游戲以3D的方式呈現(xiàn),最令人著迷的地方就是讓玩家在真實空間中動起來。然而,這依然ARKit能支持的只是放置在2D的平面上的3D游戲,不是真正的與真實場景相融合的3D。
此后,App Store中的AR應用大幅上升,除了AR游戲以外,AR小工具,例如AR尺子、AR繪畫等App數(shù)量最多。然而到目前為止,AR應用數(shù)量高達1000,我們依然沒看到一個能超過《Pokémon GO》的爆款。(延伸閱讀:蘋果第一批AR應用上線,我們幫你試了哪個最好玩!)
體驗過多款ARKit的內(nèi)容之后,雷鋒網(wǎng)發(fā)現(xiàn),目前ARKit實現(xiàn)的應用都需要有以下一些基本的操作:用相機掃描一個平面進行定位、將虛擬物體放置于平面、虛擬物體在平面上運動。根據(jù)ARKit開發(fā)的游戲讓普通用戶很費解。大多用戶都無法理解在打開AR應用前,為什么要用相機去掃描平面,而且掃描經(jīng)常需要20多秒的時間,還時常失敗。
為此,蘋果專門發(fā)文解釋ARKit設計過程需要遵從的流程:如何讓用戶快速理解AR操作、AR的人機交互與智能手機有何不同等。比起已經(jīng)有一套統(tǒng)一的規(guī)范和標準的手游,AR游戲的每一步都還需要開發(fā)者去探索,去填坑。(延伸閱讀:蘋果官方給ARKit開發(fā)者的22條建議,你家AR應用做到?jīng)]?)
在WWDC上,庫克大力贊揚ARKit,他對分析師們說:“這是我們將回顧的重大事件之一,是一個令人驚嘆的開始?!钡窃趇Phone發(fā)布會上,ARKit卻沒有被大力提及。因為其實現(xiàn)在ARKit和ARCore都只是1.0版本。只給開發(fā)者提供了三個非常簡單的AR工具:手機的六自由度位置和坐標數(shù)據(jù)、局部小型的平面、簡單的場景照明。僅僅用這三個工具,你真的無法創(chuàng)造出令人印象深刻的東西。
AR要真的改變游戲、娛樂、購物等生活場景,需要很強的3D重建能力,也就是說原生AR應用要可以實現(xiàn)數(shù)字信息和物理空間或人的交互。例如,當你在桌面放置一個虛擬的水杯,這個水杯能被前面的臺燈遮擋,這樣你會分不清哪些物體是虛擬的,哪些是真實的,有了3D重建能力,這些AR物體還可以長久地停留在真實空間中。只有這樣,我們才能真正實現(xiàn),虛擬和現(xiàn)實相融合的愿景。
此外,AR其實是一種圖像的輸出,而AR要改變?nèi)藗兊纳顖鼍埃€需要更多的輸入。這需要與AI的發(fā)展相配合。例如,美圖應用將計算機視覺等AI技術與AR技術結(jié)合,產(chǎn)生了AR美拍、AR試妝、AR試穿等功能,這些功能將真的改變購物。雷鋒網(wǎng)也了解到,微軟正嘗試將人工智能聊天機器人微軟小冰與AR相結(jié)合,這樣你就會擁有一個有虛擬形象的AI助手。在一些業(yè)內(nèi)人士看來,在未來的人機交互里,AI是輸入、AR是輸出。
AR要改變大眾的生活,單靠ARKit顯然難以做到。(延伸閱讀:大神揭秘:為什么ARKit失去了AR云的支持,就會毫無意義?, 獨家| 阿里機器視覺專家李名楊:AR是AI的一種體現(xiàn)方式)
2017年,蘋果做AR眼鏡的消息頻出,但是蘋果一直沒有正面回應。
幾年前,蘋果便已經(jīng)組建團隊,致力于 AR 相關的項目開發(fā)。這支團隊由 Mike Rockwell 帶領,工程師已經(jīng)達到數(shù)百人,現(xiàn)在他們進行著一項代號為“T288”的軟硬件項目。該團隊的第一個產(chǎn)品便是 ARKit。顯然,下一步的進展便是AR眼鏡。
關于蘋果為何先推出手機AR,庫克在10月接受《獨立報》采訪中回答到:“AR要理解世界需要大量的技術,目前的技術只能將AR運用于iPhone或iPad之類的先進設備中。如果將AR應用于其他設備上,那么你永遠不會獲得這樣的商業(yè)機會,不會有1500萬個設計者說我想借助AR釋放我們的設計激情。”
手機AR可以幫助蘋果迅速在AR市場布局,同時,AR眼鏡的技術還需要時間來積累。庫克也說道:“好的視場技術和高質(zhì)量的顯示器都尚未出現(xiàn),”他說。像所有產(chǎn)品一樣,蘋果公司只會在保證品質(zhì)的前提下進軍新的領域?!拔覀儾辉诤醭蔀榈谝?,但我們想成為最好,提供一流的用戶體驗,”庫克說:“但現(xiàn)在可以在市場上隨時都會看到的東西并不是令我們滿意的產(chǎn)品,我也不認為絕大多數(shù)人會感到滿意?!?延伸閱讀:蘋果CEO蒂姆·庫克:ARKit將和App Store一樣成功)
早在2011年,Google就推出Google Glass消費版本,雖然失敗,但是目前Google Glass企業(yè)版本在工業(yè)應用上很受歡迎。2012年推出的HoloLens依靠其強大的SLAM技術也已經(jīng)斬獲不少工業(yè)應用合作伙伴。國內(nèi)外其他小廠也已經(jīng)發(fā)布數(shù)款AR眼鏡。蘋果在AR眼鏡上沒有搶到先機,目前似乎只能采取穩(wěn)妥的布局。
11月彭博社的一篇文章終于讓我們看清楚了蘋果在AR眼鏡上的進展,包括其顯示、芯片、操作系統(tǒng)、應用商店等。最振奮人心的是,彭博社透露蘋果的目標是在2019年儲備好AR眼鏡技術,產(chǎn)品有望最早在2020年發(fā)貨。
蘋果做AR眼鏡依然也很蘋果。蘋果正在自己研發(fā) AR 頭顯的芯片。從概念上來說,這款芯片會跟蘋果手表的芯片一樣,集成度非常高。這樣的芯片能把更多的元器件,比如說圖形處理器、AI 芯片、CPU 等,集中在一小塊區(qū)域,耗能也將減少。操作系統(tǒng)方面,蘋果內(nèi)部將其稱為“rOS”(reality operating system),基于 iOS 系統(tǒng)。如同 Apple TV 的操作系統(tǒng)是 tvOS,Mac 電腦的操作系統(tǒng)是 macOS,Apple Watch 的操作系統(tǒng)是 watchOS 一樣,rOS 將是蘋果 AR 頭顯的操作系統(tǒng)。AR 頭顯也會使用已有的 APP Store,可以像 iPhone、Watch、Apple TV 和 Mac 一樣,用戶能自己下載內(nèi)容。(延伸閱讀:揭秘蘋果AR眼鏡:獨立芯片、rOS系統(tǒng),2020年發(fā)貨)
蘋果的AR眼鏡令人期待,可惜Magic Leap搶先在2017年底發(fā)布了其Magic Leap One創(chuàng)造者版本。這款讓大家等待6年之久的AR眼鏡終于浮出水面。官方介紹Magic Leap One具備數(shù)字光場、視覺感知、持久顯示、聲場音效、高性能芯片、下一代交互界面。從Magic Leap One合作的應用我們看到,其AR應用已經(jīng)開始改變音樂、游戲、社交等多個領域。Magic Leap的光場顯示和場景理解能力可以說是目前AR技術的前沿,這些技術是否讓庫克滿意,蘋果的AR能超過Magic Leap One嗎?這很值得期待。 (延伸閱讀:耗時6年,總?cè)谫Y近19億美金,外媒《滾石》萬字長文揭秘AR眼鏡 Magic Leap One(上))
AR/VR被視為是下一代的計算平臺、新的人機交互界面。各大巨頭都在布局VR/AR,在AR上,蘋果并沒有搶占任何先機。而今年ARKit的推出,著實讓人感到驚艷。憑借自身閉合的軟件和硬件生產(chǎn)鏈,蘋果讓6億iPhone設備瞬間擁有AR功能,成千上萬開發(fā)者利用ARKit可以直接開發(fā)AR內(nèi)容,大眾不用購買任何新的設備就能體驗AR。
ARKit改變了AR基礎技術和AR應用市場的整體格局,刺激了2017年AR的整體發(fā)展,使得2017成為AR發(fā)展關鍵的一年,也成為蘋果押注AR的關鍵一年。
當AR真正如智能手機一般成為我們生活必不可少的一部分,回頭看,2017年會是值得紀念的一年。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。