關(guān)于 Google 在虛擬現(xiàn)實(shí)技術(shù)上的打算，我們已經(jīng)看到了一個(gè)廉價(jià)的紙盒子 Cardboard 和一個(gè)可容納16只 GoPro 相機(jī)的托架 Jump。從技術(shù)的角度看，前者用來(lái)消費(fèi)內(nèi)容，后者用來(lái)生產(chǎn)內(nèi)容，這個(gè)布局無(wú)疑是完整的。但是，這里的“內(nèi)容”究竟指什么？在 Google 眼中，虛擬現(xiàn)實(shí)技術(shù)的核心又是什么？

VR“內(nèi)容”：跳到另一個(gè)真實(shí)空間

Jump 項(xiàng)目負(fù)責(zé)人在 Google 亞太區(qū)年度媒體會(huì)議（APAC）上的分享，或許能幫我們找到答案。 Steven Seitz 說(shuō)，Jump 的意思就是“跳到另一個(gè)真實(shí)空間”，而 Google 要做的就是讓人們更便捷地，在另一個(gè)真實(shí)空間“身臨其境”。

“便捷”說(shuō)的是廉價(jià)的 Cardboard 盒子，也說(shuō)的是開(kāi)始支持360° VR視頻的 YouTube；“身臨其境”說(shuō)的是把全景真實(shí)世界收入眼中的 Jump，以及 Jump 背后先進(jìn)的視覺(jué)補(bǔ)償算法。

這就是 Google 眼中的VR“內(nèi)容”，不同于 Oculus 和 Vive 的虛擬場(chǎng)景游戲，也不同于 Hololens 的全息電腦交互，比后兩者要“輕”得多。

這也就解釋了 Google 為什么專(zhuān)注于“體驗(yàn)不那么好”的 Cardboard 紙盒，而不是開(kāi)發(fā)更先進(jìn)的專(zhuān)門(mén)VR設(shè)備。Steven Seitz 承認(rèn) Cardboard 體驗(yàn)確實(shí)不是最好的，同時(shí)詳細(xì)解釋了原因——Cardboard 試圖兼容多個(gè)不同尺寸的手機(jī)，需要用到標(biāo)準(zhǔn)不一的手機(jī)傳感器，性能千差萬(wàn)別的運(yùn)算處理器，而且手機(jī)屏幕并不是專(zhuān)為近距離觀看而設(shè)計(jì)的。但他說(shuō)，從另一個(gè)角度看，手機(jī)是使用成本最低的，而且下一代手機(jī)一定會(huì)比現(xiàn)在的手機(jī)更適合VR?，F(xiàn)在只是 VR 技術(shù)普及的早期，下一代手機(jī)的VR體驗(yàn)一定會(huì)越來(lái)越好。

VR技術(shù)的核心：3D計(jì)算機(jī)視覺(jué)

在領(lǐng)導(dǎo) Jump 項(xiàng)目之前，Steven Seitz 已經(jīng)將計(jì)算機(jī)視覺(jué)技術(shù)引入多個(gè) Google 的產(chǎn)品，例如 Android 相機(jī)中的“鏡頭模糊”特性，通過(guò)算法讓手機(jī)也能拍出“背景虛化”的照片，就像單反和微單相機(jī)一樣。這里用到的主要算法是前景和背景的識(shí)別。

另一個(gè)項(xiàng)目是 Google 地圖的景點(diǎn)“3D Photo Tour”功能，在地圖里提供知名景點(diǎn)的多角度的畫(huà)面。這里用到的主要算法將用戶(hù)拍攝的多個(gè)角度照片對(duì)應(yīng)到立體的空間中，還原實(shí)景。

正是這些在計(jì)算機(jī)視覺(jué)技術(shù)方面的積累，幫助 Steven Seitz 在捕捉360°全景圖像的探索上取得了突破。他介紹，第一代 Jump 其實(shí)是兩臺(tái)單反相機(jī)的組合，實(shí)現(xiàn)效果不錯(cuò)，但需要支架可以旋轉(zhuǎn)，無(wú)法捕捉同一時(shí)間的全景圖像，更適合靜止的場(chǎng)景。

第二代 Jump 已經(jīng)開(kāi)始采用16只 GoPro 相機(jī)，通過(guò)視角組合，可以實(shí)現(xiàn)模擬左右眼看到的不同畫(huà)面。效果無(wú)疑得到提升，但這個(gè)方案依然有盲區(qū)，對(duì)于視覺(jué)補(bǔ)充算法不夠友好。

第三代，也就是 Google 在 I/O 2015 大會(huì)上正式公布的最終版本，依然是 16 只 GoPro 相機(jī)，組合方式有了變化，便于對(duì)未捕捉到的視角進(jìn)行算法上的補(bǔ)償。

據(jù) Steven Seitz 稱(chēng)，由 Jump 拍攝的視頻最終變成 360° 全景視頻還需要復(fù)雜的視頻合成計(jì)算。如果是一臺(tái)普通電腦的話，需要幾個(gè)月的時(shí)間進(jìn)行計(jì)算，但使用 Google 的計(jì)算機(jī)集群只需要幾個(gè)小時(shí)就可以完成。最終制作完成的視頻上傳到 YouTube，就能通過(guò) Cardboard 進(jìn)行觀看了。

Google 的VR大計(jì)

在 Google 的 Expeditions 教育項(xiàng)目中，VR技術(shù)已經(jīng)得到運(yùn)用。課堂上，老師可以帶領(lǐng)學(xué)生們回到遙遠(yuǎn)的歷史場(chǎng)景中，或者遙不可及的海底世界，可以通過(guò)控制端程序引導(dǎo)學(xué)生看一只海龜。Google 地圖的街景更是已經(jīng)積累了難以計(jì)數(shù)的全景圖像。

虛擬現(xiàn)實(shí)技術(shù)的核心是3D計(jì)算機(jī)視覺(jué)，是重建視覺(jué)空間的機(jī)器學(xué)習(xí)算法。當(dāng)我們探索這樣一個(gè)新世界時(shí)，最簡(jiǎn)單的工具加上大規(guī)模的圖像數(shù)據(jù)“訓(xùn)練”才是 Google 眼中真正的通向未來(lái)之路。

雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。