無需訓練即可創建數字人，字節PersonaTalk視頻口型編輯超SOTA

AIGC動態歡迎閱讀

原標題：無需訓練即可創建數字人，字節PersonaTalk視頻口型編輯超SOTA
關鍵字：字節跳動,視頻,口型,侵權,技術
文章來源：機器之心
內容字數：0字

內容摘要：

AIxiv專欄是機器之心發布學術、技術內容的欄目。過去數年，機器之心AIxiv專欄接收報道了2000多篇內容，覆蓋全球各大高校與企業的頂級實驗室，有效促進了學術交流與傳播。如果您有優秀的工作想要分享，歡迎投稿或者聯系報道。投稿郵箱：liyazhou@jiqizhixin.com；zhaoyunfeng@jiqizhixin.com在 AIGC 的熱潮下，基于語音驅動的視頻口型編輯技術成為了視頻內容個性化與智能化的重要手段之一。尤其是近兩年爆火的數字人直播帶貨，以及傳遍全網的霉霉講中文、郭德綱用英語講相聲，都印證著視頻口型編輯技術已經逐漸在行業中被廣泛應用，備受市場關注。
近期，字節跳動一項名為 PersonaTalk 的相關技術成果入選了 SIGGRAPH Asia 2024-Conference Track，該方案能不受原視頻質量的影響，保障生成視頻質量的同時兼顧 zero-shot 技術的便捷和穩定，可以通過非常便捷高效的方式用語音修改視頻中人物的口型，完成高質量視頻編輯，快速實現數字人視頻制作以及口播內容的二次創作。肖像來自學術數據集 HDTF
目前的視頻改口型技術大致可以分為兩

原文鏈接：無需訓練即可創建數字人，字節PersonaTalk視頻口型編輯超SOTA

聯系作者

文章來源：機器之心
作者微信：
作者簡介：