一圖一3D世界，視頻還可交互，昆侖萬維「空間智能」開年首秀來了

昆侖萬維再次豐富了自己的「AI武器庫」。

原標(biāo)題：一圖一3D世界，視頻還可交互，昆侖萬維「空間智能」開年首秀來了
文章來源：機(jī)器之心
內(nèi)容字?jǐn)?shù)：9821字

AI空間智能：昆侖萬維Matrix-Zero開啟3D虛擬世界新篇章

2025年被認(rèn)為是智能體爆發(fā)元年，AI應(yīng)用將迎來井噴式增長。然而，除了智能體，另一個AI領(lǐng)域——空間智能，也可能迎來其“ChatGPT時刻”。本文將重點介紹昆侖萬維發(fā)布的Matrix-Zero世界模型，以及空間智能技術(shù)在3D動畫領(lǐng)域的應(yīng)用前景。

1. 空間智能：AI領(lǐng)域的下一個前沿

“AI教母”李飛飛看好并押注的空間智能，被認(rèn)為是AI理解和操控3D空間的關(guān)鍵技術(shù)。它能夠?qū)I的視覺理解從二維提升到三維，實現(xiàn)更真實的立體感和空間深度。目前，空間智能領(lǐng)域面臨著大規(guī)模高質(zhì)量3D數(shù)據(jù)匱乏、生成場景細(xì)節(jié)不夠精細(xì)、多視角一致性難以保證以及效率問題等挑戰(zhàn)。

2. 昆侖萬維Matrix-Zero：突破二維限制

昆侖萬維發(fā)布的Matrix-Zero世界模型，是國內(nèi)首個同時推出3D場景生成和可交互視頻生成的模型。它能夠?qū)螐垐D片轉(zhuǎn)化為可探索的3D場景，并生成可交互視頻，實現(xiàn)了功能上的“加強版”3D物理世界和視頻生成器。Matrix-Zero預(yù)計將于4月份正式上線。

3. Matrix-Zero的核心技術(shù)優(yōu)勢

Matrix-Zero采用與李飛飛團(tuán)隊不同的技術(shù)路線，具有以下優(yōu)勢：

1. 風(fēng)格保持與轉(zhuǎn)換：支持不同風(fēng)格圖片輸入，并能進(jìn)行風(fēng)格轉(zhuǎn)換，可玩性更高。
2. 全局一致性：解決了從單一視角圖片生成廣范圍3D場景的不一致性問題，創(chuàng)建完整一致的3D世界。
3. 大范圍探索：支持任意方向的長距離、大范圍探索，增強了AI的物理推理和空間認(rèn)知能力。
4. 豐富的物理動效：實現(xiàn)了水流、光照、云霧等符合物理規(guī)律的動態(tài)效果。

4. 可交互視頻：提升用戶參與度

Matrix-Zero的可交互視頻生成模型，關(guān)注實時交互和大范圍場景。它具有很強的泛化能力，能夠生成流暢、一致、高質(zhì)量的視頻，并允許用戶調(diào)整視角、操控場景元素，極大地提升了用戶參與度。

5. Matrix-Zero的技術(shù)架構(gòu)

Matrix-Zero的3D場景生成由場景布局生成模塊和紋理生成模塊構(gòu)成，融合了可微渲染和擴(kuò)散模型技術(shù)。可交互視頻生成則基于自研的生成式視頻模型、大規(guī)模預(yù)訓(xùn)練模型和用戶輸入交互模型，實現(xiàn)了高質(zhì)量、穩(wěn)定的視頻輸出。

6. 昆侖萬維的空間智能布局

昆侖萬維在AI領(lǐng)域持續(xù)布局，從大模型到空間智能，構(gòu)建了全產(chǎn)業(yè)鏈布局。Matrix-Zero是其在空間智能領(lǐng)域的又一標(biāo)志性成果，將進(jìn)一步強化其多元AI業(yè)務(wù)矩陣，并為多模態(tài)大模型的應(yīng)用落地開辟新賽道。

7. 空間智能的未來發(fā)展

未來空間智能技術(shù)有望結(jié)合更多感官信息，通過強化學(xué)習(xí)實現(xiàn)更精確的感知和推理，并在更多行業(yè)得到應(yīng)用。對于致力于AGI的企業(yè)來說，強大的空間智能將成為AGI發(fā)展的重要支柱。

聯(lián)系作者

文章來源：機(jī)器之心
作者微信：
作者簡介：專業(yè)的人工智能媒體和產(chǎn)業(yè)服務(wù)平臺