虛擬現(xiàn)實雖然能產(chǎn)生逼真的體驗，但現(xiàn)在并不能做到與現(xiàn)實實時同步，比如讓虛擬人物反應(yīng)用戶的表情變化。

南加州大學的研究人員就和Oculus合作，研究出了一種可以跟蹤虛擬現(xiàn)實設(shè)備佩戴者臉部表情的方式，并將佩戴者的面部表情轉(zhuǎn)換成一個虛擬人物。這可以使社交、工作，甚至是在虛擬世界中游玩變的更有價值，因為設(shè)備中顯示的虛擬人物可以完美地模仿人類真實的表情。

這一過程是如何實現(xiàn)的呢？

該系統(tǒng)利用連接到頭戴設(shè)備的3D相機來追蹤佩戴者的嘴部動作。那么被佩戴的設(shè)備所遮擋住的面部表情該怎么監(jiān)測呢？原來是研究人員在設(shè)備與佩戴者面部接觸的填充泡沫中，放置了變形測量儀。再將兩個數(shù)據(jù)源相結(jié)合之后，佩戴者面部運動的精準3D圖像將被用在一個虛擬人物動畫中。

這一技術(shù)的加入會使得虛擬世界的體驗和交互變得更加引人注目。Facebook首席執(zhí)行官馬克·扎克伯格（Mark Zuckerberg）曾表示，他有興趣讓 Oculus Rift 頭戴設(shè)備給社交體驗帶來新的方式，不過他并沒有透露任何細節(jié)。不過現(xiàn)在的效果還不太理想，如果用上圖中的表情去社交的話，感覺是在嚇人吧。

除了Oculus以外，虛擬現(xiàn)實的創(chuàng)業(yè)公司High Fidelity也正在研發(fā)此類技術(shù)，該公司正在通過使用攝像頭和其他傳感器技術(shù)來追蹤佩戴者面部表情、胳膊和手勢，以便實現(xiàn)更加逼真的虛擬社交。

Oculus和南加州大學研發(fā)的系統(tǒng)的關(guān)鍵因素在于軟件，軟件可以結(jié)合傳感器追蹤的面部上部和下部的數(shù)據(jù)，并將結(jié)果匹配成一個面部3D模型。

目前，該軟件需要用戶在第一次使用時經(jīng)過一個簡短的校準過程。首先，用戶需要佩戴上只有3D攝像頭，而沒有虛擬現(xiàn)實顯示部分的設(shè)備，這樣設(shè)備就能收集到用戶完整面部的信息，用戶需要對著攝像頭持續(xù)做出10秒左右的“鬼臉”，讓設(shè)備記錄下用戶面部肌肉活動；之后，用戶佩戴上一整套完整的設(shè)備，同樣需要做出10秒鐘左右的“鬼臉”。校準過程收集的數(shù)據(jù)可以幫助軟件計算出如何正確地匹配上下面部的數(shù)據(jù)流。

目前，這一項目只是一項研究，但有必要的話也可以很快使之成為一款商業(yè)化的產(chǎn)品。不過有一個問題，虛擬世界的目的之一就是逃避現(xiàn)實，如果一個人不自信，認為自己長得不夠帥，是否會因為過于逼真的效果而放棄虛擬現(xiàn)實呢？

via technologyreview

雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。