該死，這糟糕的心動(dòng)感，AI殺瘋了！

AIGC動(dòng)態(tài)1年前 (2024)發(fā)布大數(shù)據(jù)文摘

AIGC動(dòng)態(tài)歡迎閱讀

原標(biāo)題：該死，這糟糕的心動(dòng)感，AI殺瘋了！
關(guān)鍵字：快手,項(xiàng)目,視頻,模型,圖像
文章來源：大數(shù)據(jù)文摘
內(nèi)容字?jǐn)?shù)：4665字

內(nèi)容摘要：

大數(shù)據(jù)文摘受權(quán)轉(zhuǎn)載自Jack Cui
推薦三個(gè)AI工具。
一、Champ
三維參數(shù)導(dǎo)引下可控一致的人體圖像動(dòng)畫生成項(xiàng)目。只需要一張照片，就能讓照片里的人物動(dòng)起來。
給出一個(gè)動(dòng)作視頻，Champ 可以讓不同的人像復(fù)刻出相同的動(dòng)作。
我們先來看看真實(shí)人物照片的效果：而在虛擬人物和不同風(fēng)格的照片下，Champ 也有不錯(cuò)的表現(xiàn)：項(xiàng)目主要依靠于人體網(wǎng)格恢復(fù)模型，從輸入視頻中提取參數(shù)化三維人體網(wǎng)格模型 SMPL 序列，渲染不同的信息控制視頻的生成。
項(xiàng)目框架
在項(xiàng)目的框架圖中，我們可以看到，Champ 采用了一個(gè)多層融合模塊（MLMF），通過深度、骨骼、蒙版、法線、語義幾項(xiàng)信息控制視頻的細(xì)節(jié)生成，使其更加真實(shí)靈動(dòng)。這五項(xiàng)信息，也可以通過 comfy 節(jié)點(diǎn)的示例工作流生成。
另外，Champ 利用 SMPL 保持了生成視頻中人物體型的一致。通過對(duì)齊體型參數(shù)，Champ 在保持人物的體態(tài)和動(dòng)作方面超過了其他 SOTA 工作。效果比較
項(xiàng)目提供了體驗(yàn) demo，如果需要本地部署，會(huì)根據(jù)所生成的分辨率占用顯存，分辨率越高，顯存占用越大，需要一定硬件支持，感興趣的小伙伴也可以試試分段生成。
項(xiàng)目地址：

原文鏈接：該死，這糟糕的心動(dòng)感，AI殺瘋了！