0
雷鋒網(wǎng)按：Magic Leap 公布產(chǎn)品后，外媒滾石（Rolling Stone）便發(fā)布了這篇詳細(xì)的萬字長(zhǎng)文。文中，該記者詳細(xì)描寫了他所體驗(yàn)的一系列 Demo，盡管產(chǎn)品實(shí)物圖并未曝光，但 Magic Leap 首次向外公布了 6 年時(shí)間里，他們?cè)诠鈱W(xué)方面的探索以及目前取得的進(jìn)展。由于篇幅過長(zhǎng)，雷鋒網(wǎng)將其分為上下兩個(gè)部分，整理如下。
今天 Magic Leap 發(fā)布了一款混合現(xiàn)實(shí)頭顯，被認(rèn)為是一款可以重塑人-計(jì)算機(jī)-現(xiàn)實(shí)交互的方式的產(chǎn)品。不同于那種不透明的虛擬現(xiàn)實(shí)面罩用虛擬世界取代現(xiàn)實(shí)世界 ，Magic Leap 這款稱為 Lightwear 的設(shè)備，則類似于護(hù)目鏡，你可以同時(shí)看到現(xiàn)實(shí)世界和虛擬世界，就好像戴著一副特殊的眼鏡。護(hù)目鏡與一個(gè)稱為 Lightpack 的強(qiáng)大的口袋大小的計(jì)算機(jī)相連，可以將虛擬的機(jī)器人、太空飛船，幾乎任何東西都投射到人們眼前的現(xiàn)實(shí)世界中。
創(chuàng)立于 2011 年的 Magic Leap，對(duì)人們來說仍然有點(diǎn)神秘，公司聯(lián)合了各路科技作家和分析師，更是從各種大公司和科技大佬那里吸引了無數(shù)的關(guān)注和投資（該公司已經(jīng)籌集了 19 億美元的資金）。雖然這家神秘的增強(qiáng)現(xiàn)實(shí)創(chuàng)業(yè)公司已經(jīng)發(fā)布了一些高水平的概念視頻，展示了其將虛擬影像投射到現(xiàn)實(shí)世界中的設(shè)想，但它此前并沒有向公眾展示出任何一項(xiàng)正在研發(fā)的技術(shù)。所以有些刊物甚至公開懷疑整個(gè)事情是否只是一種愚人計(jì)劃。公司估值一度持續(xù)上漲，最終的報(bào)價(jià)為 60 億美元。
整個(gè)公司由創(chuàng)始人 Rony Abovitz 一手運(yùn)作，他是一位生物工程師，曾幫助 Mako Surgical 公司設(shè)計(jì)出手術(shù)輔助機(jī)器手臂。而后在 Magic Lea 創(chuàng)立后的第四年，該公司以 16.5 億美元的價(jià)格被出售。
圖中展示了 Magic Leap One 的三個(gè)部件，左邊是 Lightpack，中間是 Lightwear，右邊是控制器
公司最后一次公開發(fā)言闡述任何技術(shù)細(xì)節(jié)的時(shí)間大約是一年前，當(dāng)時(shí) Wired 雜志應(yīng)邀到它在南佛羅里達(dá)州總部觀看正在研發(fā)的技術(shù)，但卻被規(guī)定不能報(bào)道產(chǎn)品硬件的樣子。本月月初，滾石旗下 Glixel 也收到了類似的邀請(qǐng)。Abovitz 邀請(qǐng)我們?nèi)⒂^它在勞德代爾堡的公司總部，向公眾報(bào)道介紹其第一款消費(fèi)級(jí)頭顯背后的技術(shù)及產(chǎn)品的外觀和體驗(yàn)等最終細(xì)節(jié)。
這次的產(chǎn)品解密，是我們首次真正看到這個(gè)融資數(shù)十億美元的秘密公司這些年來究竟一直在努力研發(fā)些什么，同時(shí)也是公司打算于 2018 年發(fā)布其第一款消費(fèi)級(jí)產(chǎn)品的第一步。更重要的是，我們也可以通過這次產(chǎn)品發(fā)布了解，為什么像 Google 和阿里巴巴這樣的大公司會(huì)為 Magic Leap 投入數(shù)億美元，為什么一些研究人員認(rèn)為這個(gè)公司的產(chǎn)品也許能與互聯(lián)網(wǎng)的誕生有著一樣的重要性。USC 創(chuàng)新技術(shù)研究院 MxR實(shí)驗(yàn)室的創(chuàng)意總監(jiān) David Nelson 說，像這樣的技術(shù)“正在將我們推向人機(jī)交互的新媒介，這是現(xiàn)實(shí)世界的死亡?！?/p>
我對(duì) Magic Leap 技術(shù)的第一個(gè)體驗(yàn)是在公司一幢獨(dú)立建筑物內(nèi)一個(gè)大舞臺(tái)上進(jìn)行的，這是公司做測(cè)試的地方，可能會(huì)在未來被打造成一個(gè)主題公園或其他大型場(chǎng)所。我本可以描述出這一個(gè)多小時(shí)內(nèi)所有我經(jīng)歷的產(chǎn)品演示和我內(nèi)心的想法，但是我已經(jīng)同意公司不透露產(chǎn)品和知識(shí)產(chǎn)權(quán)的細(xì)節(jié)。很多保密情況下，這些都是永遠(yuǎn)無法公開的經(jīng)驗(yàn)，但是，這樣的不公開協(xié)議也讓像我一樣的來訪者有機(jī)會(huì)看到真實(shí)的魔法。
第一個(gè)超大的演示便使我仿佛進(jìn)入了一個(gè)科幻世界，它展示了一個(gè)完整的場(chǎng)景，而強(qiáng)大的隱藏式風(fēng)扇，搖動(dòng)的揚(yáng)聲器和一系列電腦控制的彩色照明系統(tǒng)則增強(qiáng)了這個(gè)場(chǎng)景的真實(shí)性。這是一次令人震撼的體驗(yàn)，展示出未來的主題公園可以如何發(fā)揮潛在潛能，創(chuàng)造出一個(gè)沒有圍墻、不用等待的游樂場(chǎng)。最重要的是，它發(fā)生在舞臺(tái)布景中，現(xiàn)實(shí)中的布景道具凌亂散布在我周圍的地面和墻壁上，雖然與現(xiàn)實(shí)的舞臺(tái)布景看起來沒有什么區(qū)別，但卻離我很近。在眼鏡中，那些舞臺(tái)上的角色實(shí)際上并沒有出現(xiàn)在我周圍的世界，它好像是某種形式的動(dòng)畫貼紙似的，但它們與舞臺(tái)布景相結(jié)合的時(shí)候，效果是驚人的。
接著，我們回到這幢建筑物里的一個(gè)大房間，房間裝修成一個(gè)大型起居室，配有沙發(fā)，桌子，小擺設(shè)和地毯。在演示區(qū)域中，我體驗(yàn)了六十多個(gè)不同的產(chǎn)品示范。第一個(gè)體驗(yàn)是和一個(gè)漂浮在我的眼睛和遠(yuǎn)處墻壁之間的一個(gè)浮動(dòng)機(jī)器 Gimble 一起參觀房間。我走過去繞著 Gimble，從不同的角度觀察它，但它仍然靜靜地徘徊在我的視野中，周圍的世界也依然存在，但我無法透過它看到周圍，這就好像它的確有實(shí)質(zhì)的重量一樣，完全不是一個(gè)平面的圖像。
同時(shí)，我驚訝地發(fā)現(xiàn)，我越接近這個(gè)機(jī)器人，在一定程度上，它的細(xì)節(jié)就越清楚。我靠近它時(shí)，它并沒有沒有像素曝光，而是突出了我無法從遠(yuǎn)處看到的細(xì)節(jié)。但是如果我太接近它，它就有點(diǎn)模糊，我會(huì)感到與其合為一體，工作人員告訴我，這個(gè)演示文件還沒有被更細(xì)致地處理過。我還注意到，機(jī)器人的聲音也會(huì)隨著我的移動(dòng)和轉(zhuǎn)身而移動(dòng)。
接下來，系統(tǒng)工程高級(jí)總監(jiān) Sam Miller 和高級(jí)技術(shù)市場(chǎng)經(jīng)理 Shanna de luliis 向我介紹了將三個(gè)屏幕（主要是電腦顯示器）投放到我眼前真實(shí)世界的過程。它們看起來像大而平的電視屏幕或顯示器。更重要的是，我可以在任意位置讓它們彈出，甚至可以讓它們同時(shí)出現(xiàn)的。在這種情況下，我有三個(gè)屏幕，每一個(gè)都展示著內(nèi)容，我不得不轉(zhuǎn)頭來觀看他們。當(dāng)然，Gimble 機(jī)器人依然跟隨在我身邊。
之后，我又嘗試了一個(gè)小型演示：創(chuàng)建一個(gè)浮動(dòng)的四面電視，每個(gè)面的電視都在進(jìn)行直播。我可以繞著它走，觀看不同的頻道。而且無論我是否在觀看，所有的頻道都在持續(xù)播放。
房間的另一處，一道墻突然出現(xiàn)一道白色的光線，照亮了門的輪廓。門開了，一個(gè)女人走了進(jìn)來。
她走到我身邊，站在了離我?guī)壮哌h(yuǎn)的地方，這個(gè)人物的細(xì)節(jié)程度令人印象深刻。雖然我不會(huì)把她誤認(rèn)做一個(gè)真正的人，但她發(fā)出的光和她的設(shè)計(jì)卻讓她變得很真實(shí)。雖然她沒有對(duì)我說的話作出反應(yīng)，但她確實(shí)有這種能力。Miller 選擇對(duì)她進(jìn)行手動(dòng)控制，向我展示了一系列的表情來表達(dá)她的情緒：微笑，憤怒，厭惡。我注意到，當(dāng)我移動(dòng)或環(huán)顧四周時(shí)，她的眼睛是不斷跟蹤著我的。Lightwear 內(nèi)部的攝像頭可以為她提供數(shù)據(jù)，以便保持眼神接觸。這其實(shí)有點(diǎn)讓人不安，我最終竟會(huì)覺得有些粗魯而避開了與她的眼神接觸。
未來的某一天，這種虛擬人將會(huì)是你的蘋果 Siri，亞馬遜的 Alexa 或者 OK Google，它們不再只是一個(gè)無形的聲音，他們會(huì)和你一起散步，與你對(duì)視，為你提供人工智能的幫助。
整個(gè)展示是一組奇怪想法的集合，包括一個(gè)巨大的漫畫，你可以走過去觀看，就好像好像透過窗戶看一樣。
今年早些時(shí)候，我和 Madefire 公司的人員聊天，他們正在努力讓漫畫書的閱讀變得更加生動(dòng)。在佛羅里達(dá)州，我驚喜地看到他們正在進(jìn)行一些實(shí)質(zhì)性的工作：漫畫書的書頁(yè)頁(yè)面飄浮在咖啡桌上，并且不同的部分漂浮在不同的深度。當(dāng)我走近它們的時(shí)候，我可以在旁邊看到漂浮在空間中的平面圖像，或者從不同的角度觀看藝術(shù)品，比如墻上的一幅畫：畫中描繪了一場(chǎng)風(fēng)暴，而畫周圍的空氣則充滿了降雨和雷雨的聲音。這是一個(gè)微妙卻很震撼的體驗(yàn)，幫助我更直觀地感受藝術(shù)。
在另一個(gè)例子中，他們向我展示了一個(gè)他們稱之為容積捕獲（volumetric capture）的快速演示。這個(gè)團(tuán)隊(duì)首先去一些拍攝工作室，讓他們用特殊設(shè)備拍攝演員的現(xiàn)場(chǎng)表演。然后他們把這個(gè)演員放到他們的系統(tǒng)中，基本上可以把演員的現(xiàn)場(chǎng)演出投射到用戶站在的任何房間里。雖然一些細(xì)節(jié)的捕捉是粗糙的，比如鼻子和嘴巴之間的細(xì)節(jié)有些圓潤(rùn)，但整體上是能夠讓觀眾在這種投射的真人現(xiàn)場(chǎng)表演周圍走動(dòng)和仔細(xì)觀賞的。我無法描述他們捕捉并顯示的是什么，只能說它的運(yùn)動(dòng)非?？?，但我對(duì)它的視角可以保持不變。即使我在演出中走來走去，它也沒有停頓或減速。而且，我被告知，表演的投影大小可以控制，可以很大，也可以跟我的手掌一樣小。
Abovitz 說：“我把這叫做這個(gè)行業(yè)的蟑螂，因?yàn)樗肋h(yuǎn)不會(huì)死，它只需要停下來?！?我們正在看他辦公室里的一臺(tái)顯示器，上面顯示的是十九世紀(jì)三十年代的立體鏡的圖片。立體鏡給同一個(gè)物體拍攝兩張照片，每張照片的角度略有不同，然后將兩張圖片放在距離你眼睛一段距離的地方，把一種設(shè)備放在你的眼睛上，這種設(shè)備用一塊木頭擋住眼睛，使你看不到眼前近處的東西，接著你同時(shí)盯著兩張照片，你就會(huì)看到 3D 效果。但是 Abovitz 認(rèn)為自己正在運(yùn)作的技術(shù)比立體鏡更加實(shí)用一些。他說：“這個(gè)會(huì)引起視覺輻輳調(diào)節(jié)沖突，所以你的眼睛不能正常工作。你是通過一種不自然的方式查看這兩幅圖像，才得到了這個(gè)不自然的 3D 圖像?！?/p>
一切的 3D 技術(shù)都來自于 1838 年。Abovitz 說：“這對(duì)我來說有點(diǎn)令人不安。從 19 世紀(jì)開始，這種技術(shù)不斷重現(xiàn)。它出現(xiàn)在電影院的紅藍(lán)眼鏡里，出現(xiàn)在六十年代，一直到二十一世紀(jì)。當(dāng) VR 再次回來時(shí)，它好像還是一樣的東西，仿佛我們?nèi)匀煌Ａ粼谀欠N簡(jiǎn)單的想法中?！?/p>
1900 年的立體鏡（或叫做 3D 觀察器）
1830 年代的技術(shù)需要使用兩個(gè)平面圖像，虛擬現(xiàn)實(shí)也要使用兩個(gè)屏幕。Abovitz 認(rèn)為必須要有更好的方法。他對(duì)改善虛擬現(xiàn)實(shí)并不感興趣，相反，他要尋求一種更好的方式來創(chuàng)造出可以融入人們的現(xiàn)實(shí)世界視角的圖像?？傊麑?duì)混合現(xiàn)實(shí)感興趣。虛擬現(xiàn)實(shí)可以再現(xiàn)你看到的一切，增強(qiáng)現(xiàn)實(shí)可以將圖像投射到你的世界，混合現(xiàn)實(shí)則將既能夠?qū)⑻摂M圖像添加到現(xiàn)實(shí)世界，但也能意識(shí)到你和你的現(xiàn)實(shí)世界。所以，打個(gè)比方，混合現(xiàn)實(shí)中的馬可以知道你的家沙發(fā)在哪里，也不會(huì)橫穿你臥室的墻壁。
當(dāng) Abovitz 開始研究“我們被困在這個(gè)混亂之中，而出路在哪里”時(shí)，他發(fā)現(xiàn)在混合的現(xiàn)實(shí)和他想研究的世界里，有兩件事情正在發(fā)生。
第一個(gè)是所謂的“模擬光場(chǎng)信號(hào)”。光場(chǎng)基本上是所有的光線在所有物體上的反彈。當(dāng)你拍攝一張照片的時(shí)候，你正在拍攝一個(gè)非常薄的光場(chǎng)。然而，你的眼睛可以看到更多的光場(chǎng)，使你能夠感知場(chǎng)景的深度、運(yùn)動(dòng)和許多其他的視覺微妙之處。Abovitz 想知道的另一件事是，光場(chǎng)信號(hào)是如何通過眼睛進(jìn)入大腦，從而進(jìn)入視覺皮層的?！澳闼兄氖澜鐚?shí)際上是建立在你的視覺皮層上的，”他說，“這個(gè)想法是，你的視覺皮層和大腦的的一個(gè)部分就像是一個(gè)渲染引擎，你看到的外在世界正在被大約 100 萬億的神經(jīng)連接網(wǎng)絡(luò)所渲染?！?/p>
目前認(rèn)為，大約有 40％ 的神經(jīng)功能都被用于視覺處理。當(dāng)你在做某項(xiàng)運(yùn)動(dòng)時(shí)，這個(gè)比例可以達(dá)到 70％-80％。他說：“你基本上正在不斷創(chuàng)造視覺世界。你正在與這種我們稱之為動(dòng)態(tài)模擬光場(chǎng)信號(hào)的巨大視覺信號(hào)來共同創(chuàng)造它。這就是我們對(duì)宇宙中所有光子波和粒子光場(chǎng)的總稱。就像這個(gè)巨大的海洋，它無處不在。這是一個(gè)無限的信號(hào)，包含了大量的信息。“
創(chuàng)造人造光場(chǎng)所涉及的大量復(fù)雜信息很難做到，更不用說包括運(yùn)動(dòng)的方式。2011年，Abovitz 試圖與他在加州理工學(xué)院學(xué)習(xí)理論物理學(xué)的朋友解決這個(gè)問題。他們提出了一個(gè)想法：人類的視覺系統(tǒng)就像一個(gè)過濾器。眼睛并沒有看到任何東西，而是從一個(gè)大塊光場(chǎng)地中濾出一道較薄的光線，然后將它傳送到視覺皮層上。他說：“在這一點(diǎn)上，我們有自己的一套理論。”
他們最終得出的結(jié)論是，視覺皮層的功能很像電腦中的圖形處理器。它需要用眼睛給它的信息，為人們創(chuàng)造一個(gè)視覺感知的世界。并且它只需要提供很少的數(shù)據(jù)來做到這一點(diǎn)。Abovitz 說：
“也許我們所有人都已經(jīng)在基因中獲得了世界的一個(gè)版本，一個(gè)持久的模型，我們所做的只是吸收少量變化的數(shù)據(jù)來更新這個(gè)模型。這似乎與人們?nèi)绾紊?，繁衍和建造住所這一意義上的演變有著緊密的聯(lián)系，我們所有的視覺空間系統(tǒng)似乎就是從眼球到指尖，從指尖到眼前視場(chǎng)，從眼前視場(chǎng)到遠(yuǎn)處的荒野。這種整體結(jié)構(gòu)會(huì)讓我們覺得遠(yuǎn)處的老虎看來像就像一塊硬紙板，而近處的老虎才是富有細(xì)節(jié)的立體形狀。”
這意味著大腦只會(huì)在需要的時(shí)候抓住更多的信息，呈現(xiàn)更多的細(xì)節(jié)。這完全改變了 Abovitz 和他的團(tuán)隊(duì)在考慮光場(chǎng)問題的方式。如果理論是正確的，技術(shù)就不需要捕捉整個(gè)光場(chǎng)并重新創(chuàng)造場(chǎng)景; 它只需要抓住視覺中光場(chǎng)應(yīng)有的部分，并通過眼睛將傳送送到視覺皮層。Abovitz 稱之為大腦的系統(tǒng)工程視圖。他說：
“我們的想法是，如果我們能夠弄清楚這個(gè)信號(hào)或是它的近似值，然后把它編碼到芯片里就可以了，這真的很酷。我們可以制造一個(gè)小芯片，在眼前再次發(fā)射數(shù)字光場(chǎng)信號(hào)。這就是我們的主要思路?！?/p>
一下子，Abovitz 就從試圖解決問題立即轉(zhuǎn)向開始設(shè)計(jì)解決方案。他確信，如果他們能創(chuàng)造出一個(gè)能夠?qū)⒄_部分的光場(chǎng)傳遞給大腦的芯片，他就可以“欺騙”大腦讓它認(rèn)為看到的是真實(shí)的東西。這意味著他們將能擺脫傳統(tǒng)顯示器，而只用人類自身的東西?！岸U宗有兩個(gè)核心思想：不展示是最好的展示，外在世界就在心中。至少?gòu)奈覀兡壳翱吹降那闆r來看，這種思想是完全正確的。你所想的一切都在你之外，但卻完全由你自己渲染，由你和你的模擬光場(chǎng)信號(hào)共同創(chuàng)造?！?/p>
“每個(gè)人都具有天生的創(chuàng)造力，因?yàn)槊總€(gè)人都在不斷創(chuàng)造自己的化身世界。你生活的世界，是你自己在不斷創(chuàng)造，不斷的用大腦和光場(chǎng)信號(hào)共同創(chuàng)造，這是非常令人興奮的?！?/p>
下一步，就是做一些可以證明理論的東西。
via rollingstone.com 雷鋒網(wǎng)編譯
相關(guān)文章：
Magic Leap光場(chǎng)技術(shù)：是技術(shù)之躍，更是魔法之躍
解讀 Magic Leap One：除了娛樂，AR 眼鏡還能怎么用？ （二）
多個(gè)娛樂消費(fèi)應(yīng)用，Magic Leap One和其他AR眼鏡有什么不同
解讀 Magic Leap One：光學(xué)成像是怎么做的？（一）
關(guān)于 Magic Leap One，行業(yè)人士和讀者們都是怎么看的？
Magic Leap 終于揭開神秘面紗！產(chǎn)品將于 2018 年發(fā)貨
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
