NeurIPS 2024收錄！基于擴散模型編碼器模塊的推理加速丨一作、南開大學博士生李森茂講座預告

AIGC動態歡迎閱讀

原標題：NeurIPS 2024收錄！基于擴散模型編碼器模塊的推理加速丨一作、南開大學博士生李森茂講座預告
關鍵字：模型,編碼器,南開大學,圖像,時間
文章來源：智猩猩GenAI
內容字數：0字

內容摘要：

最近，文本到圖像的擴散模型取得了顯著的進步。值得注意的是，Stable Diffusion和DeepFloyd-IF是當前開源社區中最成功的兩個擴散模型。這些模型基于UNet架構，用途廣泛，可應用于廣泛的任務，包括圖像編輯、超分辨率、分割和對象檢測。擴散模型的主要缺點之一是圖像生成的推理時間較慢?，F有方法大多采用了蒸餾技術，但這些方法對計算資源要求較高。
為了解決以上問題，來自南開大學的在讀博士生李森茂提出了一種基于擴散模型編碼器模塊的推理加速的方法Faster Diffusion。相關論文為《Faster Diffusion: Rethinking the Role of the Encoder for Diffusion Model Inference》，已收錄于NeurIPS 2024。Faster Diffusion是一種簡單而有效的編碼器傳播方案，以加速針對不同任務集的擴散采樣。其核心是在多個時間步中重復使用編碼器特征，加速了擴散模型的采樣過程。
擴散模型中的一個關鍵組件是用于噪聲預測的UNet。通過分析UNet在擴散模型中的特性，發現編碼器特征在相鄰時間步之間變化平緩，具有

原文鏈接：NeurIPS 2024收錄！基于擴散模型編碼器模塊的推理加速丨一作、南開大學博士生李森茂講座預告

聯系作者

文章來源：智猩猩GenAI
作者微信：
作者簡介：