后期狂喜！一張照片絲滑替換視頻主角，動作幅度再大也OK｜Meta&新加坡國立大學

AIGC動態歡迎閱讀

原標題：后期狂喜！一張照片絲滑替換視頻主角，動作幅度再大也OK｜Meta&新加坡國立大學

關鍵字：語義,視頻,軌跡,模型,機頭

文章來源：量子位

內容字數：3553字

內容摘要：豐色 發自 凹非寺量子位 | 公眾號 QbitAI后期狂喜了家人們～現在，只需一張圖片就能替換視頻主角，效果還是如此的絲滑！且看這個叫做“VideoSwap”的新視頻編輯模型——小貓一鍵變小狗，基操～如果原物體本身扭動幅度大一些？也完全沒問題：細看倆者之間的軌跡，給你保持得是一毛一樣：再如果，替換前后的物體形狀差別較大呢？例如車身較高的SUV換更長的超跑，大郵輪換小白船。吶，也是一整個完美替換，基本看不出任何破綻：對比谷歌今年2月發的同類視頻替換模型Dreamix：不得不說，現在這技術進步真是肉眼可見啊～那么，它是如何做到的呢？方法也很有意思。只需幾個語義點，拽一拽就OK不管是風格轉換還是主題/背景轉換，這種視頻編輯任務的主要挑戰都是如何從源視頻中提取軌跡傳輸到新視頻、覆蓋到新元素上，同時確保時間一致性。此前的模型（原理包括編碼源、使用注意力圖、光流等）大多數顧此失彼，要么在時…

原文鏈接：點此閱讀原文：后期狂喜！一張照片絲滑替換視頻主角，動作幅度再大也OK｜Meta&新加坡國立大學

聯系作者

文章來源：量子位

作者微信：QbitAI

作者簡介：追蹤人工智能新趨勢，關注科技行業新突破