0
| 本文作者： 田苗 | 2017-08-24 18:23 |
北京國際廣播電影電視設(shè)備展覽會（BIRTV）是中國最具權(quán)威的廣播電影電視專業(yè)設(shè)備綜合展覽會，每年我們都會從這場展覽會上看到最新的影視技術(shù)和設(shè)備。
其實，英偉達(dá)早就不是我們印象中的“電腦芯片”公司了。今年 5 月的 GTC 大會上，英偉達(dá) CEO 黃仁勛發(fā)表了時長 2 小時的主題演講，內(nèi)容涵蓋 VR、GPU 云服務(wù)、自動駕駛芯片、深度學(xué)習(xí)、機(jī)器人訓(xùn)練等等，期間推出了 VRWork Audio SDK，用于在 VR 中實現(xiàn)立體聲效。不久前的 SIGGRAPH 大會上，我們了解到，影視級專業(yè)相機(jī) Z CAM V1 PRO 就集成了 VRWork SDK，可實現(xiàn) 360 度 VR 立體直播。
目前，360 度 VR 全景視頻是電影電視行業(yè)不斷探索的方向，這也就不奇怪為什么英偉達(dá)會參加 BIRTV。
現(xiàn)場，英偉達(dá)的 VR 相關(guān)負(fù)責(zé)人介紹了針對 VR 領(lǐng)域，VRWork 所能做的事情包括四個方面：模擬真實世界的觸感，模擬立體聲效，實現(xiàn)更好、更高效的畫面渲染，以及 360 度視頻拍攝和直播。
2016 年的 SIGGRAPH 大會上，他們便推出了 LIVE 360 Mono，但當(dāng)時音效只能實現(xiàn)單聲道，今年則實現(xiàn)了立體聲效。
VRWorks 360 Video SDK 支持實時和后期制作的 360 度單聲道和立體聲工作流程，可支持：
4K 攝像機(jī)實時&離線視頻拼接
GPU 加速的視頻解碼、校準(zhǔn)、拼接和編碼
360 度投影至立體地圖和全景
GPUDirect for Video，可實現(xiàn)低延遲視頻采集
多達(dá) 32 路視頻流
該 SDK 免費開放，可登陸其官網(wǎng)進(jìn)行下載。
英偉達(dá)工作人員表示畫面拼接的關(guān)鍵在于，
“全景相機(jī)由多個攝像頭構(gòu)成，各個攝像頭之間會有畫面重疊的部分，并且可能不在同一個時間點，畫面拼接時必須在同一個時序里面；二是兩個臨近的攝像頭拍攝時，如何識別出畫面重合的部分，拼接完可能會漏掉，我們一定會做‘補洞’、‘補光’。”
“我們的 GPU 效率可能更高，這是涉及硬件層面的架構(gòu)?！?/p>
Project Holodeck
除了全景視頻，這次他們還把 Holodeck 的演示片段帶到了現(xiàn)場。
Holodeck 的演示 Demo 十分簡單，直觀些說，這是針對汽車設(shè)計者制作的內(nèi)容。Demo 中你會看到一輛價值不菲的跑車，你可以隨意調(diào)整汽車的顏色（外觀和車座），可以拿著標(biāo)尺測量車輪的大小，可以站在車外“透視”到前車蓋下的發(fā)動機(jī)，還可以讓整輛車全部“炸開”，看到跑車的各個零件，并且“游走”在這些零件間（這是比較震撼的場景）。
由于展會場地條件的限制，現(xiàn)場網(wǎng)絡(luò)狀況不好，雷鋒網(wǎng)沒有體驗到“多人協(xié)作”的模式（但在 SIGGRAPH 上雷鋒網(wǎng)其他編輯體驗過多人模式）。
工作人員表示，Demo 中的跑車使用了 5000 多萬個面，至于 Holodeck 下一步到底具體怎么用，現(xiàn)在還沒有確定，要等 9 月份北京舉辦的 GTC 大會上的新消息。
此前雷鋒網(wǎng)在 SIGGRAPH 大會上對 Holodeck 有過較為詳細(xì)的報道，英偉達(dá)專業(yè) VR 業(yè)務(wù)主管 David Weinstein 透露，Holodeck 將在 9 月進(jìn)行內(nèi)測，屆時會邀請一部分合作伙伴參與，收集各方反饋對 Holodeck 進(jìn)行優(yōu)化。他也反復(fù)強調(diào)，Holodeck 現(xiàn)在只是一個項目，不能算產(chǎn)品，只有在完善到一定程度之后才會公測。
作為一個架構(gòu)，英偉達(dá)會把 Holodeck 提供給游戲、娛樂與工作應(yīng)用開發(fā)商，用于開發(fā)它們的具體產(chǎn)品。
英偉達(dá)的工作人員還透露了一些他們正在試驗室里做的事情。例如，現(xiàn)有的 HTC Vive 手柄只能夠震動，如果讓手柄實現(xiàn)力反饋，這將大大增強沉浸感；還有 SIGGRAPH 上展示過的“變焦虛擬：近眼現(xiàn)實的新型光學(xué)結(jié)構(gòu)（Varifocal Virtuality: A Novel Optical Layout for Near-Eye Display）”。
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
