Sora場景轉「3D資產」！浙大CAD&CG全重實驗室提出文本轉3D新SOTA：多功能、可拓展

AIGC動態歡迎閱讀

原標題：Sora場景轉「3D資產」！浙大CAD&CG全重實驗室提出文本轉3D新SOTA：多功能、可拓展
關鍵字：場景,模型,表征,數據,視頻
文章來源：新智元
內容字數：14695字

內容摘要：

新智元報道編輯：LRS
【新智元導讀】3D-SceneDreamer采用基于Stable Diffusion的Inpainting模型來對不斷對場景未見區域進行補全，并通過單目深度方法來輔助優化場景的三維結構，對于未見視角利用擴散模型的自然圖像先驗來引導視圖修復。在這個數字化飛速發展的時代，我們的生活被越來越多的3D內容所包圍，從電影中令人驚嘆的特效到游戲中栩栩如生的場景，再到虛擬現實中的沉浸體驗，這一切都離不開背后復雜的3D場景建模/生成技術。
然而傳統的3D創作工具，如InfiGen和Blender，雖然功能強大，但它們通常需要專業的建模技能和大量的手工操作，這不僅耗時而且往往效率低下。
為了促進3D場景的創造，并減少對專業技能的需求，我們迫切需要一種直觀、多功能且可控性強的3D場景生成工具。
近期，OpenAI發布的視頻生成模型Sora在社交媒體上廣受關注。通過超大規模訓練，Sora能夠生成展現連貫三維空間的視頻，并精準模擬物體間的物理互動。
此外，它還能確保視頻中物體的空間一致性，即便在復雜場景變換中也能維持正確的相對位置和軌跡，展示了相當驚艷的效果。
然而通過視頻生

原文鏈接：Sora場景轉「3D資產」！浙大CAD&CG全重實驗室提出文本轉3D新SOTA：多功能、可拓展

聯系作者

文章來源：新智元
作者微信：AI_era
作者簡介：智能+中國主平臺，致力于推動中國從互聯網+邁向智能+新紀元。重點關注人工智能、機器人等前沿領域發展，關注人機融合、人工智能和機器人對人類社會與文明進化的影響，領航中國新智能時代。