AIGC動態歡迎閱讀

原標題：視頻生成控制提升幾十倍，新一代輕量級ControlNeXt火了，賈佳亞團隊正挑戰Scaling Law
關鍵字：模型,團隊,參數,條件,圖像
文章來源：機器之心
內容字數：0字

內容摘要：

機器之心原創
編輯：杜偉最近，又一款國產 AI 神器吸引了眾網友和圈內研究人員的關注！它就是全新的圖像和視頻生成控制工具 —— ControlNeXt，由思謀科技創始人、港科大講座教授賈佳亞團隊開發。X 平臺上知名 AI 博主「AK」推薦
從命名來看，ControlNeXt 「致敬」了斯坦福大學研究團隊在 2023 年 2 月提出的 ControlNet，通過引入一些額外的控制信號，讓預訓練的圖像擴散模型（如 Stable Diffusion）根據預設的條件調整和優化，實現線稿生成全彩圖，還能做語義分割、邊緣檢測、人體姿勢識別。
如果說 ControlNet 開啟了大模型多樣化玩法的先河，那么 ControlNeXt 在生成速度、精準控制和用戶友好性等方面迎來全方位優化。重要的是，ControlNeXt 只用不到 ControlNet 10% 的訓練參數，可以稱得上是下一代「小鋼炮版」ControlNet 了。
截至目前，ControlNeXt 兼容了多款 Stable Diffusion 家族圖像生成模型（包括 SD1.5、SDXL、SD3），以及視頻生成模型 SVD。并且，Cont

原文鏈接：視頻生成控制提升幾十倍，新一代輕量級ControlNeXt火了，賈佳亞團隊正挑戰Scaling Law

聯系作者

文章來源：機器之心
作者微信：
作者簡介：