畫個框、輸入文字，面包即刻出現：AI開始在3D場景「無中生有」了

AIGC動態歡迎閱讀

原標題：畫個框、輸入文字，面包即刻出現：AI開始在3D場景「無中生有」了
關鍵字：對象,視圖,場景,邊界,文本
文章來源：機器之心
內容字數：4689字

內容摘要：

機器之心報道
編輯：陳萍現在，通過文本提示和一個 2D 邊界框，我們就能在 3D 場景中生成對象。看到下面這張圖了沒？一開始，盤子里是沒有東西的，但當你在托盤上畫個框，然后在文本框中輸入文本「在托盤上添加意大利面包」，魔法就出現了：一個看起來美味可口的面包就出現在你的眼前。房間的地板上看起來太空蕩了，想加個凳子，只需在你中意的地方框一下，然后輸入文本「在地板上添加一個矮凳」，一張凳子就出現了：?
相同的操作方式，在圓桌上添加一個茶杯：
??
玩具旁邊擺放一只手提包統統都可以：?我們可以從以上示例看出，新生成的目標可以插在場景中的任意位置，還能很好地與原場景進行融合。
上述研究來自蘇黎世聯邦理工學院和谷歌，在論文《InseRF: Text-Driven Generative Object Insertion in Neural 3D Scenes》中，他們提出了一種名為 InseRF 的 3D 場景重建方法。InseRF 能基于用戶提供的文本描述和參考視點中的 2D 邊界框，在 3D 場景中生成新對象。論文地址：https://arxiv.org/pdf/2401.05335.pdf
項

原文鏈接：畫個框、輸入文字，面包即刻出現：AI開始在3D場景「無中生有」了

聯系作者

文章來源：機器之心
作者微信：almosthuman2014
作者簡介：專業的人工智能媒體和產業服務平臺