AIGC動態歡迎閱讀
內容摘要:
大數據文摘受權轉載自Jack Cui
推薦三個AI工具。
一、Champ
三維參數導引下可控一致的人體圖像動畫生成項目。只需要一張照片,就能讓照片里的人物動起來。
給出一個動作視頻,Champ 可以讓不同的人像復刻出相同的動作。
我們先來看看真實人物照片的效果:而在虛擬人物和不同風格的照片下,Champ 也有不錯的表現:項目主要依靠于人體網格恢復模型,從輸入視頻中提取參數化三維人體網格模型 SMPL 序列,渲染不同的信息控制視頻的生成。
項目框架
在項目的框架圖中,我們可以看到,Champ 采用了一個多層融合模塊(MLMF),通過深度、骨骼、蒙版、法線、語義幾項信息控制視頻的細節生成,使其更加真實靈動。這五項信息,也可以通過 comfy 節點的示例工作流生成。
另外,Champ 利用 SMPL 保持了生成視頻中人物體型的一致。通過對齊體型參數,Champ 在保持人物的體態和動作方面超過了其他 SOTA 工作。效果比較
項目提供了體驗 demo,如果需要本地部署,會根據所生成的分辨率占用顯存,分辨率越高,顯存占用越大,需要一定硬件支持,感興趣的小伙伴也可以試試分段生成。
項目地址:
原文鏈接:該死,這糟糕的心動感,AI殺瘋了!
聯系作者
文章來源:大數據文摘
作者微信:BigDataDigest
作者簡介:普及數據思維,傳播數據文化
? 版權聲明
文章版權歸作者所有,未經允許請勿轉載。
相關文章
暫無評論...