0
在首屆騰訊用戶開放日上,騰訊音頻實驗室,帶著三維虛擬聽覺解決方案,向所有的C端用戶亮相。
眾所周知,好的內(nèi)容不僅僅只是視覺上的沖擊,更需要聲色光電等支持。在電影行業(yè)有一句話,“沒聲音再好的戲也出不來”,這句話強調(diào)了聲音對電影的重要性。對于VR內(nèi)容,亦復如是?,F(xiàn)階段的VR內(nèi)容,還停留在視頻和視覺階段,聲音的缺位成為了行業(yè)的共同痛點。顯然,三維虛擬聽覺解決方案就是奔著解決痛點而來。
這次,三維虛擬聽覺解決方案在用戶開放日上的亮相,是騰訊音頻實驗室所交出的階段性成績單 。展區(qū)的現(xiàn)場是一個白色的罩子內(nèi)配有耳機,騰訊三維虛擬聽覺解決方案聲技術負責人郭亮告訴雷鋒網(wǎng),罩子和耳機內(nèi)無技術上的勾連,罩子的作用是為了營造一個更好的環(huán)境,讓聽眾更能感受到聲音的環(huán)繞效果。雷鋒網(wǎng)也去體現(xiàn)了一把,所聽到的內(nèi)容是一段有關于法律內(nèi)容的討論,明顯地感受到了聲音的遠近和說話人的方位。
此次的三維虛擬聽覺解決方案配合一副雙聲道的耳機使用。方案所配套的耳機非特殊的耳機,任何一副具有雙聲道的耳機都能使用三維虛擬聽覺解決方案,從而達到3D耳機的效果,實現(xiàn)聲源方位的重現(xiàn),提供更好的立體感和空間感,帶來更強的沉浸感。
方案中聲源的收集也并非像傳統(tǒng)3D音效解決方案,它并不依賴特定的收集器材,任意麥克風都可以收集聲音的內(nèi)容。騰訊的三維虛擬聽覺解決方案更多的是倚重算法的處理,即使左邊收集到聲音,算法亦可以處理成是右邊的聲音,擺脫來自硬件的束縛。
方案的實現(xiàn)是利用“頭部關聯(lián)傳輸函數(shù)”( HRTF 算法),對雙耳之間的時間差異和頻譜差異進行建模,形成有聲源方位感的聲音。但不僅僅利用( HRTF 算法),同時還采樣混響混響填補HRIR缺失的環(huán)境反射聲,從而構建完整的聲場模型。比如在一個小房間里,不僅可以聽到兩個人之間的對話,還可以聽到聲音從墻壁中反射的效果,增加沉浸感。
據(jù)悉,騰訊這次展出的三維虛擬聽覺相關技術提案已寫入AVS(國家音視頻編解碼技術標準):VR音頻國家標準中,且在騰訊今年發(fā)布的一款VR 游戲“hello world”中已上線。游戲中,通過玩家的坐標實時計算出當前不同方向或位置聲音所產(chǎn)生的大小和音調(diào)等,進而制造出360度立體空間聲音定位的效果,從而加強游戲的真實感和沉浸感。
在體驗的現(xiàn)場,雷鋒網(wǎng)采訪了一位體驗官,他表示和一般的Bose耳機相比,騰訊音視頻實驗室的三維音頻方案很明顯是對人的優(yōu)化,對于接收方的優(yōu)化。如果能夠應用到重度的游戲當中,一定能夠加強用戶的體驗感受。此外,他還對雷鋒網(wǎng)補充說,此次騰訊所展示出來的三維虛擬聽覺解決方案,讓他最為驚喜的是耳機的切入角度,很多設備方都是對聲音本身(音源)進行優(yōu)化,但是騰訊耳機(三維虛擬聽覺解決方案)是對于人的生物系數(shù)進行研究,從而對聲音進行編輯,達到更好的播放效果。
最后郭亮向雷鋒網(wǎng)表示,三維虛擬聽覺解決方案最理想的效果是根據(jù)每一個人的頭型大小進行模型的調(diào)試,騰訊三維虛擬聽覺解決方案未來也會在這一板塊加強,希望給每一個用戶帶來更為震撼和真實的效果。
據(jù)雷鋒網(wǎng)知悉,騰訊音視頻實驗室,成立于2016年11月,專注于音視頻通信技術的前瞻性研究,包括全球?qū)崟r音視頻網(wǎng)絡優(yōu)化、音視頻編解碼前沿算法研究、計算機視覺圖像處理、基于AI的音頻語音增強、聲音美化及音視頻質(zhì)量評測等。在服務于騰訊社交體系下的海量用戶同時,在實時音視頻通信、圖像處理和音視頻處理等技術領域積累了十幾年的研究經(jīng)驗,擁有行業(yè)領先的技術水平。目前已為行業(yè)數(shù)百個產(chǎn)品提供了音視頻技術支持與服務,如QQ電話、騰訊云、企業(yè)微信、QQ空間、全民K歌、快手、斗魚、虎牙、蘑菇街等。
一直以來,聲音和畫面都是相輔相成。谷歌Cardboard的高管Nathan Martz曾表示,VR音頻不容忽略。他說,許多人認為在開發(fā)VR產(chǎn)品和體驗過程中,視頻和視覺是最重要的因素,其實不然,聲音也同樣重要。巨頭和巨頭之間也許共存默契,同樣重軍進場VR的音頻內(nèi)容。其實,在資深游戲開發(fā)者群體中,流傳著一個行業(yè)經(jīng)驗——“聲音讓場景更加真實”。
雷鋒網(wǎng)在現(xiàn)場觀察到一個小小的花絮,一個體驗官在感受完騰訊的三維虛擬聽覺解決方案之后,希望馬上掃碼付款,買走耳機。她向雷鋒網(wǎng)表示,感受到聲音不是單純從耳朵里傳出,是頭部的立體環(huán)繞,非常刺激。雷鋒網(wǎng)在展區(qū),觀察到前來體驗的觀眾人數(shù)亦十分多,現(xiàn)場非?;鸨?,普遍向雷鋒網(wǎng)表示,體驗十分新鮮。
這次來自騰訊三維虛擬聽覺解決方案 ,從幕后走向了臺前,帶來了一場音效的新革命的前序,相信未來將會開啟沉浸感的新紀元??萍嫉那斑M,帶給我們很多視角,從感覺的刺激到聽覺的革新,如今有三維虛擬聽覺解決方案,讓人類有不同的方式去發(fā)現(xiàn),原來聽覺帶來也可以這樣的豐富。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權禁止轉載。詳情見轉載須知。