突破次元壁！新加坡國立發(fā)布GenXD：拿捏真實感3D、4D動態(tài)場景

AIGC動態(tài)歡迎閱讀

原標題：突破次元壁！新加坡國立發(fā)布GenXD：拿捏真實感3D、4D動態(tài)場景
關(guān)鍵字：視角,場景,相機,物體,數(shù)據(jù)
文章來源：新智元
內(nèi)容字數(shù)：0字

內(nèi)容摘要：

新智元報道編輯：LRST
【新智元導讀】GenXD模型結(jié)合CamVid-30K數(shù)據(jù)集突破了3D和4D場景生成的挑戰(zhàn)，能從單張圖片生成逼真的動態(tài)3D和4D場景。這一進展為虛擬世界構(gòu)建帶來新的可能性，讓動態(tài)場景的生成更加快速和真實。在我們熟知的2D圖像和視頻生成技術(shù)蓬勃發(fā)展之際，3D和4D的世界依然是前沿科技的「無人區(qū)」。
面對真實場景中復雜的物體和視角變化，3D、4D生成一直面臨數(shù)據(jù)和模型設(shè)計的雙重瓶頸。然而，一項令人振奮的突破即將改變這一現(xiàn)狀！近日，新加坡國立大學（NUS）的研究人員提出了一種全新的生成框架——GenXD，不但能生成極具真實感的3D場景，還實現(xiàn)了從相機視角和物體圖片中「生長」出逼真的4D動態(tài)場景。項目主頁：https://gen-x-d.github.io/
論文鏈接：https://arxiv.org/abs/2411.02319
代碼鏈接：https://github.com/HeliosZhao/GenXD
GenXD能夠?qū)崿F(xiàn)單圖片靜態(tài)虛擬物體和場景的生成，實現(xiàn)高質(zhì)量的3D內(nèi)容創(chuàng)作：GenXD也能夠?qū)崿F(xiàn)稀疏圖片場景的重建，作為先驗完善3D重建任務(wù)：GenXD

原文鏈接：突破次元壁！新加坡國立發(fā)布GenXD：拿捏真實感3D、4D動態(tài)場景