虛擬現(xiàn)實(shí)雖然能產(chǎn)生逼真的體驗(yàn)，但現(xiàn)在并不能做到與現(xiàn)實(shí)實(shí)時(shí)同步，比如讓虛擬人物反應(yīng)用戶(hù)的表情變化。

南加州大學(xué)的研究人員就和Oculus合作，研究出了一種可以跟蹤虛擬現(xiàn)實(shí)設(shè)備佩戴者臉部表情的方式，并將佩戴者的面部表情轉(zhuǎn)換成一個(gè)虛擬人物。這可以使社交、工作，甚至是在虛擬世界中游玩變的更有價(jià)值，因?yàn)樵O(shè)備中顯示的虛擬人物可以完美地模仿人類(lèi)真實(shí)的表情。

這一過(guò)程是如何實(shí)現(xiàn)的呢？

該系統(tǒng)利用連接到頭戴設(shè)備的3D相機(jī)來(lái)追蹤佩戴者的嘴部動(dòng)作。那么被佩戴的設(shè)備所遮擋住的面部表情該怎么監(jiān)測(cè)呢？原來(lái)是研究人員在設(shè)備與佩戴者面部接觸的填充泡沫中，放置了變形測(cè)量?jī)x。再將兩個(gè)數(shù)據(jù)源相結(jié)合之后，佩戴者面部運(yùn)動(dòng)的精準(zhǔn)3D圖像將被用在一個(gè)虛擬人物動(dòng)畫(huà)中。

這一技術(shù)的加入會(huì)使得虛擬世界的體驗(yàn)和交互變得更加引人注目。Facebook首席執(zhí)行官馬克·扎克伯格（Mark Zuckerberg）曾表示，他有興趣讓 Oculus Rift 頭戴設(shè)備給社交體驗(yàn)帶來(lái)新的方式，不過(guò)他并沒(méi)有透露任何細(xì)節(jié)。不過(guò)現(xiàn)在的效果還不太理想，如果用上圖中的表情去社交的話，感覺(jué)是在嚇人吧。

除了Oculus以外，虛擬現(xiàn)實(shí)的創(chuàng)業(yè)公司High Fidelity也正在研發(fā)此類(lèi)技術(shù)，該公司正在通過(guò)使用攝像頭和其他傳感器技術(shù)來(lái)追蹤佩戴者面部表情、胳膊和手勢(shì)，以便實(shí)現(xiàn)更加逼真的虛擬社交。

Oculus和南加州大學(xué)研發(fā)的系統(tǒng)的關(guān)鍵因素在于軟件，軟件可以結(jié)合傳感器追蹤的面部上部和下部的數(shù)據(jù)，并將結(jié)果匹配成一個(gè)面部3D模型。

目前，該軟件需要用戶(hù)在第一次使用時(shí)經(jīng)過(guò)一個(gè)簡(jiǎn)短的校準(zhǔn)過(guò)程。首先，用戶(hù)需要佩戴上只有3D攝像頭，而沒(méi)有虛擬現(xiàn)實(shí)顯示部分的設(shè)備，這樣設(shè)備就能收集到用戶(hù)完整面部的信息，用戶(hù)需要對(duì)著攝像頭持續(xù)做出10秒左右的“鬼臉”，讓設(shè)備記錄下用戶(hù)面部肌肉活動(dòng)；之后，用戶(hù)佩戴上一整套完整的設(shè)備，同樣需要做出10秒鐘左右的“鬼臉”。校準(zhǔn)過(guò)程收集的數(shù)據(jù)可以幫助軟件計(jì)算出如何正確地匹配上下面部的數(shù)據(jù)流。

目前，這一項(xiàng)目只是一項(xiàng)研究，但有必要的話也可以很快使之成為一款商業(yè)化的產(chǎn)品。不過(guò)有一個(gè)問(wèn)題，虛擬世界的目的之一就是逃避現(xiàn)實(shí)，如果一個(gè)人不自信，認(rèn)為自己長(zhǎng)得不夠帥，是否會(huì)因?yàn)檫^(guò)于逼真的效果而放棄虛擬現(xiàn)實(shí)呢？

via technologyreview

雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。