網(wǎng)絡(luò)最后是池化層和全連接層。池化層的輸入為殘差幀經(jīng)掩蓋效應(yīng)處理后的結(jié)果,它代表了人眼可感知?dú)埐?。全連接層學(xué)習(xí)整體感知質(zhì)量和目標(biāo)質(zhì)量分?jǐn)?shù)區(qū)間的非線性回歸關(guān)系。
在評測結(jié)果上,騰訊多媒體實(shí)驗(yàn)室在LIVE和CSIQ兩個(gè)視頻質(zhì)量數(shù)據(jù)集上對所提出算法的性能進(jìn)行驗(yàn)證。并使用標(biāo)準(zhǔn)的PLCC和SROCC作為質(zhì)量準(zhǔn)則來比較不同算法的性能。將所提出的C3DVQA與常用的全參考質(zhì)量評估算法進(jìn)行對比,包括PSNR,MOVIE,ST-MAD,VMAF和DeepVQA,結(jié)果如下表所示。
(LIVE和CSIQ兩個(gè)數(shù)據(jù)庫上不同全參考算法性能比較)
目前該評估算法已在騰訊內(nèi)外部多款產(chǎn)品中進(jìn)行使用驗(yàn)證,如騰訊會(huì)議就借助實(shí)驗(yàn)室上百個(gè)符合ITU/3GPP/AVS等國外內(nèi)標(biāo)準(zhǔn)的指標(biāo)進(jìn)行評判,閉環(huán)監(jiān)控全網(wǎng)的用戶體驗(yàn)質(zhì)量,從用戶真實(shí)體驗(yàn)出發(fā),不斷優(yōu)化產(chǎn)品性能。
作為最早布局音視頻領(lǐng)域的公司之一,從最早的QQ平臺(tái),騰訊就試圖解決在當(dāng)年網(wǎng)絡(luò)條件下若干的音視頻通信問題。伴隨著5G、云計(jì)算、大數(shù)據(jù)、人工智能技術(shù)的發(fā)展,騰訊多媒體實(shí)驗(yàn)室基于多年的技術(shù)沉淀和行業(yè)經(jīng)驗(yàn),逐步打磨出一條完善且高質(zhì)量的音視頻技術(shù)鏈條。