火山引擎發布大模型訓練視頻預處理方案，已應用于豆包視頻生成模型

AIGC動態歡迎閱讀

原標題：火山引擎發布大模型訓練視頻預處理方案，已應用于豆包視頻生成模型
關鍵字：小米,模型,視頻,火山,方案
文章來源：AI前線
內容字數：0字

內容摘要：

整理 | 褚杏娟
10 月 15 日，火山引擎在視頻云技術大會上發布了大模型訓練視頻預處理方案，助力解決視頻大模型訓練的成本、質量和性能等方面的技術挑戰。目前，該技術方案已應用于豆包視頻生成模型。
對訓練視頻進行預處理是保障大模型訓練效果的重要前提。預處理過程可以統一視頻的數據格式、提高數據質量、實現數據標準化、減少數據量以及處理標注信息，從而使模型能更高效地學習視頻中的特征和知識，提升訓練效果和效率。
抖音集團視頻架構負責人王悅表示，對大模型廠商而言，上述過程中面臨著諸多挑戰：首先，超大規模視頻訓練數據集導致計算和處理成本激增；其次，視頻樣本數據參差不齊；然后，處理鏈路環節多、工程復雜；最后，面臨著對 GPU、CPU、ARM 等多種異構算力資源的調度部署難題。
借助 Intel 的 CPU 等資源，火山引擎發布了大模型訓練視頻預處理方案依托于自研的多媒體處理框架 BMF，以有效應對模型訓練的算力成本挑戰。此外，該方案還在算法和工程方面進行了調優，可以對海量視頻數據高質量預處理，短時間內實現處理鏈路的高效協同，提高模型訓練效率。值得一提的是，火山引擎本次還發布并開源了移動端后處理解決

原文鏈接：火山引擎發布大模型訓練視頻預處理方案，已應用于豆包視頻生成模型