6月26日，記者獲悉，新一代實時語音編碼行業(yè)標(biāo)準(zhǔn)AVS3P10即將正式發(fā)布。

該標(biāo)準(zhǔn)由騰訊提議啟動、推進和維護，以騰訊首款神經(jīng)網(wǎng)絡(luò)語音編解碼器Penguins為原型，經(jīng)過AVS音頻組多家成員單位共同貢獻。

作為全球首個系統(tǒng)性引入人工智能并實現(xiàn)真正意義上的低碼率下高質(zhì)量語音編碼標(biāo)準(zhǔn)，AVS3P10的表現(xiàn)達到國際一流水準(zhǔn)。僅需現(xiàn)有主流標(biāo)準(zhǔn)1/3的編碼碼率，就能實現(xiàn)同等清晰的音質(zhì)。

這意味著，今后在線上會議、語音通話等實時音頻場景，帶寬要求大幅降低。即使在電梯、地庫、隧道等網(wǎng)絡(luò)很差的環(huán)境，也能實現(xiàn)清晰流暢的語音通話。

在有限的帶寬條件下，想要將聲音高質(zhì)量傳遞到接收方，壓縮原始數(shù)據(jù)、去除冗余信息的語音編碼技術(shù)是其中關(guān)鍵。然而，基于EVS、OPUS等現(xiàn)有主流音頻編解碼標(biāo)準(zhǔn)，當(dāng)碼率降低到10kbps以下時，語音質(zhì)量下降明顯，影響用戶體驗。

為應(yīng)對該挑戰(zhàn)，騰訊會議天籟實驗室聯(lián)合騰訊AI Lab自研了騰訊首款神經(jīng)網(wǎng)絡(luò)語音編解碼器——Penguins。此次AVS音頻組AVS3P10標(biāo)準(zhǔn)采納的騰訊側(cè)方案，就是以Penguins為原型。

具體來說，Penguins將AI與傳統(tǒng)技術(shù)緊密融合，從算法研究、工程化、產(chǎn)品化層面做了大量系統(tǒng)性創(chuàng)新，打破傳統(tǒng)香農(nóng)定律的性能極限，引入大數(shù)據(jù)并在可控算力增量下提供了新的性能上界，從而對下一代通信系統(tǒng)，尤其是信源編碼器部分，提供了新的技術(shù)基礎(chǔ)和方法論。通過AI語音信號建模，提取最核心的特征參數(shù)編碼，再借助深度學(xué)習(xí)網(wǎng)絡(luò)，預(yù)測并重建語音中的細(xì)微結(jié)構(gòu)，最終生成逼真的音頻波形。

多方測試表明，騰訊提交的AVS3P10標(biāo)準(zhǔn)，代表了目前AI Codec的行業(yè)最高水平。該標(biāo)準(zhǔn)實現(xiàn)了6kbps下的高質(zhì)量語音通信，即使在“2G”網(wǎng)絡(luò)下也能實現(xiàn)清晰通話，且主觀質(zhì)量非常接近原始參考信號，媲美國際主流的OPUS標(biāo)準(zhǔn)在20kbps的質(zhì)量。同時，主觀質(zhì)量對標(biāo)傳統(tǒng)編碼的中高碼率情況下，編碼效率提升200-300%。

2021年起，Penguins音頻編碼器就在騰訊會議的駕駛模式、弱網(wǎng)模式及QQ語音通話等場景中投入規(guī)模應(yīng)用，支持了億級用戶的流暢溝通。無論是在復(fù)雜的網(wǎng)絡(luò)環(huán)境中，還是在高速移動的交通工具上，都能提供清晰的音頻通信體驗。

2023年3月，騰訊團隊在AVS音頻組主動提議并參與標(biāo)準(zhǔn)制定，促進行業(yè)的技術(shù)進步，即AVS3P10實時語音編碼標(biāo)準(zhǔn)。隨后，騰訊提交基于Penguins的候選技術(shù)；經(jīng)過AVS音頻組交叉驗證后采納。2024年6月，AVS3P10實時語音編碼標(biāo)準(zhǔn)正式完成標(biāo)準(zhǔn)化工作，進入公示階段。

值得一提的是，騰訊主導(dǎo)該標(biāo)準(zhǔn)制定的過程，也被AVS工作組評價為制定速度最快，標(biāo)準(zhǔn)交付質(zhì)量最高，測試得到充分好評。

“AVS3P10 實時語音編碼，作為新一代的語音編解碼技術(shù)標(biāo)準(zhǔn)，是對AVS系列標(biāo)準(zhǔn)的重要補充。該標(biāo)準(zhǔn)是當(dāng)前業(yè)界的最高水平，體現(xiàn)了騰訊在語音處理、人工智能技術(shù)創(chuàng)新和用戶體驗方面的實力，將為用戶帶來更好的體驗”，AVS工作組指出。

在編解碼、音頻降噪、語音增強等領(lǐng)域，騰訊會議天籟實驗室正在探索實時音頻通信前沿技術(shù)，打造全球領(lǐng)先的實時音頻通信端到端解決方案。同時，通過將更多研究成果應(yīng)用到騰訊會議等產(chǎn)品中，持續(xù)提升用戶體驗，打造“聽得清、聽得真”的極致體驗。