騰訊聯(lián)合清華大學(xué)、香港科技大學(xué)推出全新圖生視頻模型「Follow-Your...

3 月 15 日，騰訊和清華大學(xué)、香港科技大學(xué)聯(lián)合推出全新圖生視頻模型「Follow-Your-Click」，目前已經(jīng)上架 GitHub（代碼四月公開），同時還發(fā)表了一篇研究論文（DOI:2403.08268）。

這款圖生視頻模型主要功能包括局部動畫生成和多對象動畫，支持多種動作表達(dá)，如頭部調(diào)整、翅膀拍動等。

據(jù)介紹， Follow-Your-Click 可以通過用戶的點擊和簡短動作提示生成局部圖像動畫。用戶只需點擊對應(yīng)區(qū)域，加上少量提示詞，就可以讓圖片中原本靜態(tài)的區(qū)域動起來，一鍵轉(zhuǎn)換成視頻，比如讓物體微笑、跳舞或飄動。

除了能夠控制單個對象的動畫，這個框架還支持同時對多個對象進(jìn)行動畫處理，增加了動畫的復(fù)雜性和豐富性。用戶可以通過簡單的點擊和短語提示輕松地指定希望動畫化的區(qū)域和動作類型，無需復(fù)雜的操作或詳細(xì)描述。（來源：IT之家）