2
| 本文作者： haoxiaoru | 2015-11-10 17:15 |
關(guān)于 Google 在虛擬現(xiàn)實(shí)技術(shù)上的打算，我們已經(jīng)看到了一個廉價的紙盒子 Cardboard 和一個可容納16只 GoPro 相機(jī)的托架 Jump。從技術(shù)的角度看，前者用來消費(fèi)內(nèi)容，后者用來生產(chǎn)內(nèi)容，這個布局無疑是完整的。但是，這里的“內(nèi)容”究竟指什么？在 Google 眼中，虛擬現(xiàn)實(shí)技術(shù)的核心又是什么？
Jump 項(xiàng)目負(fù)責(zé)人在 Google 亞太區(qū)年度媒體會議（APAC）上的分享，或許能幫我們找到答案。 Steven Seitz 說，Jump 的意思就是“跳到另一個真實(shí)空間”，而 Google 要做的就是讓人們更便捷地，在另一個真實(shí)空間“身臨其境”。
“便捷”說的是廉價的 Cardboard 盒子，也說的是開始支持360° VR視頻的 YouTube；“身臨其境”說的是把全景真實(shí)世界收入眼中的 Jump，以及 Jump 背后先進(jìn)的視覺補(bǔ)償算法。
這就是 Google 眼中的VR“內(nèi)容”，不同于 Oculus 和 Vive 的虛擬場景游戲，也不同于 Hololens 的全息電腦交互，比后兩者要“輕”得多。
這也就解釋了 Google 為什么專注于“體驗(yàn)不那么好”的 Cardboard 紙盒，而不是開發(fā)更先進(jìn)的專門VR設(shè)備。Steven Seitz 承認(rèn) Cardboard 體驗(yàn)確實(shí)不是最好的，同時詳細(xì)解釋了原因——Cardboard 試圖兼容多個不同尺寸的手機(jī)，需要用到標(biāo)準(zhǔn)不一的手機(jī)傳感器，性能千差萬別的運(yùn)算處理器，而且手機(jī)屏幕并不是專為近距離觀看而設(shè)計的。但他說，從另一個角度看，手機(jī)是使用成本最低的，而且下一代手機(jī)一定會比現(xiàn)在的手機(jī)更適合VR。現(xiàn)在只是 VR 技術(shù)普及的早期，下一代手機(jī)的VR體驗(yàn)一定會越來越好。
在領(lǐng)導(dǎo) Jump 項(xiàng)目之前，Steven Seitz 已經(jīng)將計算機(jī)視覺技術(shù)引入多個 Google 的產(chǎn)品，例如 Android 相機(jī)中的“鏡頭模糊”特性，通過算法讓手機(jī)也能拍出“背景虛化”的照片，就像單反和微單相機(jī)一樣。這里用到的主要算法是前景和背景的識別。
另一個項(xiàng)目是 Google 地圖的景點(diǎn)“3D Photo Tour”功能，在地圖里提供知名景點(diǎn)的多角度的畫面。這里用到的主要算法將用戶拍攝的多個角度照片對應(yīng)到立體的空間中，還原實(shí)景。
正是這些在計算機(jī)視覺技術(shù)方面的積累，幫助 Steven Seitz 在捕捉360°全景圖像的探索上取得了突破。他介紹，第一代 Jump 其實(shí)是兩臺單反相機(jī)的組合，實(shí)現(xiàn)效果不錯，但需要支架可以旋轉(zhuǎn)，無法捕捉同一時間的全景圖像，更適合靜止的場景。
第二代 Jump 已經(jīng)開始采用16只 GoPro 相機(jī)，通過視角組合，可以實(shí)現(xiàn)模擬左右眼看到的不同畫面。效果無疑得到提升，但這個方案依然有盲區(qū)，對于視覺補(bǔ)充算法不夠友好。
第三代，也就是 Google 在 I/O 2015 大會上正式公布的最終版本，依然是 16 只 GoPro 相機(jī)，組合方式有了變化，便于對未捕捉到的視角進(jìn)行算法上的補(bǔ)償。
據(jù) Steven Seitz 稱，由 Jump 拍攝的視頻最終變成 360° 全景視頻還需要復(fù)雜的視頻合成計算。如果是一臺普通電腦的話，需要幾個月的時間進(jìn)行計算，但使用 Google 的計算機(jī)集群只需要幾個小時就可以完成。最終制作完成的視頻上傳到 YouTube，就能通過 Cardboard 進(jìn)行觀看了。
在 Google 的 Expeditions 教育項(xiàng)目中，VR技術(shù)已經(jīng)得到運(yùn)用。課堂上，老師可以帶領(lǐng)學(xué)生們回到遙遠(yuǎn)的歷史場景中，或者遙不可及的海底世界，可以通過控制端程序引導(dǎo)學(xué)生看一只海龜。Google 地圖的街景更是已經(jīng)積累了難以計數(shù)的全景圖像。
虛擬現(xiàn)實(shí)技術(shù)的核心是3D計算機(jī)視覺，是重建視覺空間的機(jī)器學(xué)習(xí)算法。當(dāng)我們探索這樣一個新世界時，最簡單的工具加上大規(guī)模的圖像數(shù)據(jù)“訓(xùn)練”才是 Google 眼中真正的通向未來之路。
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
