0
本文作者: 木子 | 2020-11-03 14:22 | 專(zhuān)題:全面突破 vivo NEX |
合作簽約儀式現(xiàn)場(chǎng)
近年來(lái),實(shí)時(shí)互動(dòng)游戲經(jīng)歷著前所未有的快速發(fā)展,越來(lái)越多玩家在游戲時(shí)需要團(tuán)隊(duì)作戰(zhàn),位于不同地點(diǎn)的玩家對(duì)實(shí)時(shí)傳輸語(yǔ)音質(zhì)量的要求日漸提高。流暢無(wú)卡頓、且玩法豐富的游戲語(yǔ)音溝通逐漸成為游戲長(zhǎng)久運(yùn)營(yíng)的必要條件。不同于傳統(tǒng)IM軟件,手游場(chǎng)景下的語(yǔ)音通話對(duì)“降能提效”有更高的要求:
(1)使用傳統(tǒng)IM軟件的用戶一般會(huì)選擇較為安靜的環(huán)境通話。而玩家在游戲時(shí)很可能身處嘈雜環(huán)境,因此手游語(yǔ)音通話面臨著來(lái)自外界噪音、游戲內(nèi)背景音樂(lè)及音效的降噪挑戰(zhàn)。
(2)一般情況下,手機(jī)上的語(yǔ)音算法往往會(huì)運(yùn)行在手機(jī)的CPU上,這樣會(huì)大量消耗CPU內(nèi)存等處理計(jì)算資源。而游戲本身已經(jīng)占用大量計(jì)算資源,此時(shí)需要游戲語(yǔ)音利用最小的性能消耗,實(shí)現(xiàn)最佳的語(yǔ)音體驗(yàn)。
為滿足游戲每日海量的對(duì)局交流,降低性能消耗的同時(shí)進(jìn)一步提升玩家的語(yǔ)音體驗(yàn),騰訊游戲語(yǔ)音GVoice聯(lián)合全球智能手機(jī)品牌vivo、高通公司展開(kāi)深層次技術(shù)優(yōu)化,利用第五代高通AI引擎聯(lián)合推出游戲語(yǔ)音處理技術(shù),旨在從源頭提升語(yǔ)音體驗(yàn)。
11月2日,騰訊互娛研發(fā)效能部副總經(jīng)理李從兵,及vivo軟件平臺(tái)部總經(jīng)理?xiàng)钸M(jìn)寧于深圳市舉行了游戲語(yǔ)音技術(shù)合作簽約儀式。此次簽約標(biāo)志著雙方將在游戲語(yǔ)音領(lǐng)域展開(kāi)深度合作。現(xiàn)階段在降噪去雜優(yōu)化、性能消耗優(yōu)化等方面已有一定的成果,后續(xù)雙方將在回聲消除、聲紋識(shí)別等方面持續(xù)開(kāi)展合作。
(1)降噪去雜優(yōu)化
GVoice算法針對(duì)游戲場(chǎng)景進(jìn)行深度優(yōu)化,在游戲場(chǎng)景下比傳統(tǒng)IM軟件的語(yǔ)音處理算法有更加優(yōu)異的音質(zhì)表現(xiàn)。傳統(tǒng)IM軟件(VOIP)算法的平均雜音時(shí)長(zhǎng)比例為11.5%,而GVoice的平均雜音時(shí)長(zhǎng)比例為3.4%。利用高通AI引擎上的高通Hexagon? DSP運(yùn)行GVoice算法后,降噪效果更加明顯。
圖一:GVoice & VOIP雜音時(shí)常比例對(duì)比
圖二:未處理語(yǔ)音波形圖
圖三:GVoice優(yōu)化后波形圖
通過(guò)對(duì)GVoice topology位置的移動(dòng),vivo深度優(yōu)化運(yùn)行在高通AI引擎上Hexagon處理器里面的GVoice參數(shù),以針對(duì)游戲場(chǎng)景取得更佳效果,如下圖所示的某場(chǎng)景下:對(duì)比于傳統(tǒng)的算法(左通道),vivo和騰訊游戲GVoice合作的騰訊游戲語(yǔ)聊定制優(yōu)化通路(右通道)在語(yǔ)音還原(青色框內(nèi))和噪聲壓制(黃色框內(nèi))的表現(xiàn)上面都有提升,其降噪效果在部分場(chǎng)景可以提升10dB左右;
圖四:vivo深度優(yōu)化算法在噪聲環(huán)境下,語(yǔ)音還原
(2)發(fā)送語(yǔ)音效果優(yōu)化
在玩游戲的時(shí)候,游戲的背景音效也是提升游戲體驗(yàn)的一種方式;同樣的,隊(duì)友之間的語(yǔ)音互動(dòng)顯得非常重要;傳統(tǒng)將算法運(yùn)行在CPU上面,手機(jī)端為了獲取更好游戲背景音效,不得不犧牲部分場(chǎng)景下的發(fā)送語(yǔ)音效果,導(dǎo)致隊(duì)友之間的聊天有時(shí)變得斷續(xù);GVoice的應(yīng)用使手機(jī)端和游戲端的算法完全綁定,vivo仍然可以通過(guò)深度優(yōu)化運(yùn)行在高通AI引擎Hexagon處理器里面的語(yǔ)音算法參數(shù),得到更好的語(yǔ)音聊天效果。
下圖左通道表示傳統(tǒng)算法的語(yǔ)音通話效果,右通道表示vivo和騰訊GVoice合作的騰訊游戲語(yǔ)聊定制優(yōu)化通路,通過(guò)左右通道對(duì)比可以明顯看出:不管本地游戲背景音效是否打開(kāi),vivo深度優(yōu)化算法均可獲得良好的語(yǔ)音聊天效果,其出現(xiàn)通話斷續(xù)的概率遠(yuǎn)遠(yuǎn)低于傳統(tǒng)算法(青色框內(nèi)),而且對(duì)于隊(duì)友之間的語(yǔ)音清晰,也不會(huì)出現(xiàn)一些非預(yù)期的效果(黃色框內(nèi));
圖五:vivo深度優(yōu)化算法在開(kāi)發(fā)本地背景音效時(shí)的上行語(yǔ)聊
(3)性能消耗優(yōu)化
開(kāi)啟游戲及GVoice語(yǔ)音后,GVoice中的降噪算法不再運(yùn)行在CPU上,而是運(yùn)行在高通AI引擎的Hexagon處理器上,整機(jī)耗電量下降20mA/s,GVoice所占的CPU資源在原有基礎(chǔ)上減少約30%。
基于在游戲語(yǔ)音技術(shù)領(lǐng)域的探索與嘗試,此次合作將加快游戲語(yǔ)音算法核心技術(shù)領(lǐng)域的研發(fā)成果落地于商用產(chǎn)品的步伐,賦能越來(lái)越多的游戲開(kāi)發(fā)者,確保億萬(wàn)玩家在移動(dòng)平臺(tái)上早日獲得更優(yōu)的游戲體驗(yàn),同時(shí)也歡迎其他優(yōu)秀廠商與我們合作探索更多技術(shù)可能。
雷鋒網(wǎng)雷鋒網(wǎng)
雷峰網(wǎng)版權(quán)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。
本專(zhuān)題其他文章