1
原標題:最強開源短劇創作模型來了!超160種表情、400種肢體動作,好萊塢級AI導演監制
文章來源:智東西
內容字數:10228字
昆侖萬維開源首個AI短劇創作模型SkyReels:開啟全民短劇時代
本文總結了智東西對昆侖萬維開源的AI短劇創作模型SkyReels的報道要點。昆侖萬維發布了中國首個面向AI短劇創作的視頻生成模型SkyReels-V1和SOT別基于視頻基座模型的表情動作可控算法SkyReels-A1,標志著視頻生成模型競爭進入全新高度。
1. SkyReels-V1:一鍵生成好萊塢級短劇
SkyReels-V1基于昆侖萬維的混元大模型訓練,支持文生視頻和圖生視頻,性能可對標快手可靈、MiniMax海螺AI等閉源模型。其核心能力在于:精準的微表情還原、專業的運鏡技巧和好萊塢級的畫面構圖,這些都能夠一鍵完成。用戶可在SkyReels平臺體驗,該平臺已展示眾多復雜任務的生成實例,用戶可在幾分鐘內創作出好萊塢大片即視感的視頻。
2. 技術突破:精準、快速、可控
SkyReels-V1的突破在于生成精準、速度更快以及結果可控三個方面。首先,它支持162種細膩人物表情和400多種自然動作組合,并基于好萊塢級影視數據訓練,確保畫面構圖和人物站位更具電影質感。其次,它利用自研的推理優化框架SkyReels-Infer,在單臺4090上只需80秒即可生成544p分辨率視頻,并支持分布式多卡并行,顯著提升生成速度。最后,它通過自研的人物智能解析系統,實現對人物表情、動作和場景的精準理解和控制,確保生成視頻的準確性和可控性。
3. SkyReels-A1:電影級表情捕捉
SkyReels-A1是一個SOT別的基于視頻基座模型的表情動作可控算法,對標Runway的Act-One,實現電影級的表情捕捉。它能夠精準地捕捉和還原人物在不同角度和動作下的表情變化,使生成視頻更加生動逼真。
4. 全棧AI布局與開源策略
昆侖萬維采用“All in AGI和AIGC”戰略,構建了AI大模型、AI搜索、AI音樂、AI社交、AI游戲、AI視頻六大業務矩陣。其SkyReels平臺集成了多個自研大模型,涵蓋劇本生成、分鏡、人物對白和BGM等環節,實現從劇本創作到最終視頻生成的全流程自動化。昆侖萬維堅持開源策略,開源了SkyReels-V1和SkyReels-A1,以及其他一系列AI模型和工具,加速推動大模型生態發展。
5. 結語:開啟全民AI短劇創作時代
SkyReels的出現降低了短劇創作門檻,讓“一個人拍爽劇”成為現實。隨著視頻生成模型性能的提升,以及SkyReels等產品的不斷完善,AI短劇創作生態將日趨成熟,推動行業技術創新和內容創新,最終開啟全民AI短劇創作時代。
聯系作者
文章來源:智東西
作者微信:
作者簡介:智能產業新媒體!智東西專注報道人工智能主導的前沿技術發展,和技術應用帶來的千行百業產業升級。聚焦智能變革,服務產業升級。