“具身智能小鎮(zhèn)”來了！機器人逛超市買菜滿街跑，AI充當NPC，來自上海AI Lab

AIGC動態(tài)歡迎閱讀

原標題：“具身智能小鎮(zhèn)”來了！機器人逛超市買菜滿街跑，AI充當NPC，來自上海AI Lab
關鍵字：機器人,場景,物體,模型,桃源
文章來源：量子位
內(nèi)容字數(shù)：0字

內(nèi)容摘要：

明敏發(fā)自凹非寺量子位 | 公眾號 QbitAI超逼真的機器人小鎮(zhèn)來了！
在這里，機器人可以像人一樣在超市里購物：
買菜回家做飯：
在辦公室里接咖啡（旁邊還有人類同事）：
不只有人形機器人，機器狗、臂式機器人也在這個“城市”里穿梭自如。
這就是由上海AI實驗室最新提出的首個模擬交互式3D世界：GRUtopia（中文名：桃源）。
在這里，由多達100k個交互式、帶精細注釋的場景組合成逼真城市環(huán)境。
包含室內(nèi)室外，餐廳、超市、辦公室、家庭等89個不同場景類別。
由大模型驅(qū)動的NPC，可以在這個世界里和機器人對話交互。
這樣一來，各種機器人能在虛擬小鎮(zhèn)里完成各種行為模擬，也就是最近流行的Sim2Real路線，能大幅降低具身智能現(xiàn)實世界數(shù)據(jù)收集難度和成本。
該項目計劃開源，現(xiàn)階段在GitHub上已提供demo安裝指南。
安裝成功后，就能在demo里控制一個人形機器人在房間內(nèi)活動，并支持調(diào)整不同視角。
機器人的虛擬桃源其核心工作共有三項：
GRScenes
GRResidents
GRBench
其中，GRScenes是一個包含大規(guī)模場景數(shù)據(jù)的數(shù)據(jù)集。
它極大程度上擴展了機器人可以活動和操