大規(guī)模3D場(chǎng)景2分鐘生成!中科院發(fā)布空間智能新框架SceneX,AAAI 2025收錄
SceneX框架展示了程序化內(nèi)容生成與多Agent工作流結(jié)合的巨大潛力。
原標(biāo)題:大規(guī)模3D場(chǎng)景2分鐘生成!中科院發(fā)布空間智能新框架SceneX,AAAI 2025收錄
文章來(lái)源:智猩猩GenAI
內(nèi)容字?jǐn)?shù):4351字
SceneX:高效逼真3D場(chǎng)景生成框架
本文介紹了一種創(chuàng)新的3D場(chǎng)景生成框架SceneX,它能夠根據(jù)簡(jiǎn)單的文字描述快速創(chuàng)建高質(zhì)量、逼真的虛擬場(chǎng)景,顯著提升虛擬世界構(gòu)建的效率和靈活性。SceneX由中國(guó)科學(xué)院自動(dòng)化研究所和北京科技大合團(tuán)隊(duì)研發(fā),其核心在于整合程序化內(nèi)容生成和多Agent工作流,克服了傳統(tǒng)方法在構(gòu)建豐富、細(xì)節(jié)化且可編輯的3D虛擬世界時(shí)面臨的諸多挑戰(zhàn)。
1. SceneX的核心模塊
SceneX主要包含兩個(gè)核心模塊:PCGHub和PCGPlanner。
1.1 PCGHub:多樣化程序化資產(chǎn)與布局生成平臺(tái)
PCGHub集成了多種程序化生成模塊和3D資產(chǎn),提供了172個(gè)涵蓋自然環(huán)境、建筑等領(lǐng)域的程序化資產(chǎn),以及多種靈活的布局生成器。通過(guò)標(biāo)準(zhǔn)化API和詳盡文檔,開(kāi)發(fā)者可以輕松創(chuàng)建豐富多樣的3D場(chǎng)景。此外,PCGHub還包含11,284個(gè)高質(zhì)量3D靜態(tài)資產(chǎn),極大地豐富了資源庫(kù)。
1.2 PCGPlanner:智能場(chǎng)景生成與布局規(guī)劃
PCGPlanner利用PCGHub提供的資源,實(shí)現(xiàn)場(chǎng)景的自動(dòng)化生成。其過(guò)程包括四個(gè)階段:場(chǎng)景分解、地形生成、物體生成與檢索、資產(chǎn)放置。通過(guò)智能規(guī)劃,確保生成結(jié)果的連貫性和幾何一致性。
2. SceneX的優(yōu)勢(shì)
SceneX在場(chǎng)景生成方面展現(xiàn)出顯著的優(yōu)勢(shì):
2.1 高質(zhì)量與高效率:SceneX生成的場(chǎng)景獲得了用戶和專(zhuān)家的一致好評(píng),其評(píng)分結(jié)果幾乎持平。同時(shí),SceneX大幅提升了生成效率,例如生成一片自然景觀只需幾分鐘。
2.2 高可控性與精準(zhǔn)還原:SceneX具備強(qiáng)大的語(yǔ)義理解能力,能夠根據(jù)文本指令精確控制場(chǎng)景細(xì)節(jié),實(shí)現(xiàn)“所見(jiàn)即所得”的效果。
2.3 模塊化設(shè)計(jì):SceneX的模塊化設(shè)計(jì)確保了生成結(jié)果的連貫性和幾何一致性,方便用戶靈活調(diào)整和擴(kuò)展。
3. SceneX的應(yīng)用前景
SceneX強(qiáng)大的可控性和高質(zhì)量的生成能力,為虛擬世界構(gòu)建、游戲開(kāi)發(fā)、影視制作等領(lǐng)域開(kāi)辟了新的可能性。其高效便捷的場(chǎng)景生成體驗(yàn),將極大促進(jìn)相關(guān)產(chǎn)業(yè)的發(fā)展。
4. 第四屆全球自動(dòng)駕駛峰會(huì)預(yù)告
文章最后預(yù)告了將于1月14日在北京舉辦的第四屆全球自動(dòng)駕駛峰會(huì),該峰會(huì)將涵蓋自動(dòng)駕駛領(lǐng)域的多個(gè)主題,包括端到端自動(dòng)駕駛創(chuàng)新、城市NOA、自動(dòng)駕駛視覺(jué)語(yǔ)言模型和自動(dòng)駕駛世界模型等。
聯(lián)系作者
文章來(lái)源:智猩猩GenAI
作者微信:
作者簡(jiǎn)介:智猩猩旗下公眾號(hào)之一,深入關(guān)注大模型與AI智能體,及時(shí)搜羅生成式AI技術(shù)產(chǎn)品。