分享一個(gè)騰訊開(kāi)源的多模態(tài)內(nèi)容理解框架

大家好，我是DASOU。

前段時(shí)間QQ瀏覽器組織了一次2021AI算法大賽，其中一個(gè)賽道是多模態(tài)視頻相似度判定。

比賽結(jié)束之后，我順藤摸瓜發(fā)現(xiàn)騰訊把baseline的框架開(kāi)源了，地址在這里：

https://github.com/Tencent/Lichee

對(duì)框架的官方介紹如下：

Lichee是一個(gè)多模態(tài)內(nèi)容理解算法框架項(xiàng)目，其中包含數(shù)據(jù)增強(qiáng)、預(yù)訓(xùn)練引擎、常見(jiàn)模型以及推理加速等模塊。由騰訊看點(diǎn)內(nèi)容算法研發(fā)中心研發(fā)。并于2021年在騰訊看點(diǎn)、騰訊視頻、內(nèi)容管線、QQ等業(yè)務(wù)場(chǎng)景均有落地，并平均減少標(biāo)注樣本量40%+。經(jīng)過(guò)多次實(shí)踐迭代，可以大幅縮短信息流內(nèi)容理解需求的研發(fā)周期提升人效。此外，為QQ瀏覽器2021AI算法大賽-多模態(tài)視頻相似度賽道提供baseline模型及代碼?，F(xiàn)將Lichee對(duì)外開(kāi)源，為微服務(wù)開(kāi)源社區(qū)貢獻(xiàn)力量。

如果有在做多模態(tài)的朋友，但是苦于沒(méi)有代碼可以魔改的，可以試試這個(gè)~~