CenseoQoE圖像和視頻質(zhì)量評(píng)估

CenseoQoE 提供圖像/視頻畫(huà)質(zhì)評(píng)價(jià)算法模型訓(xùn)練到應(yīng)用落地的完整方案，主要包括 CenseoQoE-Algorithm 和 CenseoQoE-SDK兩部分。

• CenseoQoE-Algorithm 是通用的畫(huà)質(zhì)評(píng)價(jià)算法模型的訓(xùn)練框架，
• CenseoQoE-SDK集成了針對(duì)多種業(yè)務(wù)場(chǎng)景訓(xùn)練好的畫(huà)質(zhì)評(píng)價(jià)模型，可直接對(duì)UGC視頻、PGC視頻、游戲視頻等做無(wú)參考/有參考的畫(huà)質(zhì)評(píng)價(jià)，實(shí)現(xiàn)開(kāi)箱即用。

圖像/視頻在編解碼、傳輸和顯示等過(guò)程中難免引入不同類(lèi)型/程度的失真導(dǎo)致圖像質(zhì)量下降。圖像/視頻質(zhì)量評(píng)價(jià)(IVQA)的研究目標(biāo)是希望模仿人類(lèi)視覺(jué)感知系統(tǒng)， 通過(guò)算法評(píng)估圖片/視頻在終端用戶(hù)的眼中畫(huà)質(zhì)主觀(guān)體驗(yàn)的好壞，目前在視頻編解碼、畫(huà)質(zhì)增強(qiáng)、畫(huà)質(zhì)監(jiān)控、推薦算法、競(jìng)品分析等領(lǐng)域有廣泛的應(yīng)用。

主要特性

• CenseoQoE-Algorithm 提供圖像/視頻畫(huà)質(zhì)評(píng)價(jià)算法模型訓(xùn)練的 codebase，集成自研的模型以及業(yè)界開(kāi)源的算法模型，支持無(wú)參考和有參考。此外，騰訊會(huì)公開(kāi)不同業(yè)務(wù)場(chǎng)景下 （UGC視頻、PGC視頻、游戲視頻、直播視頻等）的預(yù)訓(xùn)練模型，用戶(hù)可以利用這些預(yù)訓(xùn)練模型在自己的數(shù)據(jù)集進(jìn)行微調(diào)優(yōu)化。
• CenseoQoE-SDK 集成了基于 CenseoQoE-Algorithm 在騰訊自研的數(shù)據(jù)集上訓(xùn)練得到的多個(gè)業(yè)務(wù)場(chǎng)景下的畫(huà)質(zhì)評(píng)價(jià)模型，全部使用c++ 實(shí)現(xiàn)，編譯之后可直接對(duì) UGC 視頻、PGC 視頻、游戲視頻等做畫(huà)質(zhì)評(píng)價(jià)，實(shí)現(xiàn)開(kāi)箱即用。

為什么叫 CenseoQoE？

Censeo 在拉丁語(yǔ)中是我認(rèn)為/我覺(jué)得的意思，與圖像/視頻畫(huà)質(zhì)體驗(yàn)評(píng)價(jià)領(lǐng)域的主觀(guān)評(píng)測(cè)概念相符，QoE則是體驗(yàn)質(zhì)量（Quality of Experience）。

快速開(kāi)始

• 如果你想做模型的訓(xùn)練或是優(yōu)化改進(jìn)，請(qǐng)參見(jiàn) CenseoQoE-Algorithm。
• 如果你想快速使用 CenseoQoE 推出的畫(huà)質(zhì)評(píng)價(jià)工具/SDK，請(qǐng)參見(jiàn) CenseoQoE-SDK。

引用

@misc{wen2021strong,
      title={A strong baseline for image and video quality assessment}, 
      author={Shaoguo Wen and Junle Wang},
      year={2021},
      eprint={2111.07104},
      archivePrefix={arXiv},
      primaryClass={eess.IV}
}