3D重建范式變革!最新模型MVDiffusion++:無需相機(jī)姿態(tài),即可實(shí)現(xiàn)高清3D模型重建

AIGC動態(tài)歡迎閱讀
原標(biāo)題:3D重建范式變革!最新模型MVDiffusion++:無需相機(jī)姿態(tài),即可實(shí)現(xiàn)高清3D模型重建
關(guān)鍵字:圖像,視圖,模型,相機(jī),特征
文章來源:新智元
內(nèi)容字?jǐn)?shù):9788字
內(nèi)容摘要:
新智元報道編輯:LRS
【新智元導(dǎo)讀】受人類視覺系統(tǒng)的啟發(fā),MVDiffusion++結(jié)合計算方法高保真和人類視覺系統(tǒng)靈活性,可以根據(jù)任意數(shù)量的無位姿圖片, 生成密集、高分辨率的有位姿圖像,實(shí)現(xiàn)了高質(zhì)量的3D模型重建。人類的視覺展現(xiàn)出了驚人的靈活性。比如說,在上圖的左側(cè)圖像中,雖然人腦無法創(chuàng)建毫米級精確的3D模型,但人類的視覺系統(tǒng)可以結(jié)合少量圖像的信息,在腦海中形成一個連貫的3D表現(xiàn),包括老虎的復(fù)雜面部特征或形成玩具火車的積木的排列,即使是對于完全遮擋的部分也是如此。
3D重建技術(shù)在過去十五年里以一種根本不同的方式發(fā)展。與人類從幾張圖像中推斷3D形狀的能力不同,這項技術(shù)需要數(shù)百張物體的圖像,估計它們的精確相機(jī)參數(shù),并以亞毫米級的精度重建高保真度的3D幾何形狀。
最近,來自西門菲莎大學(xué)等機(jī)構(gòu)的研究人員提出了一種結(jié)合計算方法高保真和人類視覺系統(tǒng)靈活性的新3D重建范式,其靈感來源于最近多視圖圖像生成模型的發(fā)展,尤其是MVDiffusion、MVDream和Wonder3D等,這些方案展示了通過大生成模型生成3D模型的可能性。論文鏈接:https://arxiv.org/abs/2402.1
原文鏈接:3D重建范式變革!最新模型MVDiffusion++:無需相機(jī)姿態(tài),即可實(shí)現(xiàn)高清3D模型重建
聯(lián)系作者
文章來源:新智元
作者微信:AI_era
作者簡介:智能+中國主平臺,致力于推動中國從互聯(lián)網(wǎng)+邁向智能+新紀(jì)元。重點(diǎn)關(guān)注人工智能、機(jī)器人等前沿領(lǐng)域發(fā)展,關(guān)注人機(jī)融合、人工智能和機(jī)器人對人類社會與文明進(jìn)化的影響,領(lǐng)航中國新智能時代。

粵公網(wǎng)安備 44011502001135號