NeurIPS 2024收錄！港科大&上海AI Lab提出高質量可控的自動駕駛世界模型Vista | 一作高深遠博士主講預告

AIGC動態歡迎閱讀

原標題：NeurIPS 2024收錄！港科大&上海AI Lab提出高質量可控的自動駕駛世界模型Vista | 一作高深遠博士主講預告
關鍵字：模型,世界,數據,保真度,論文
文章來源：智猩猩GenAI
內容字數：0字

內容摘要：

世界模型被業內認為是通往自動駕駛的唯一解。世界模型是真實世界的模擬，可以根據控制指令預測對應的未來并反饋給決策過程，從而有效地幫助智能體的訓練和測試。
上海人工智能實驗室OpenDriveLab聯合香港科技大學等研究人員構建了迄今為止最大的公共駕駛數據集OpenDV-2K，其中包含超過2000小時的駕駛視頻，比廣泛使用的nuScenes數據集大374倍。基于OpenDV-2K還構建了自動駕駛領域中第一個大規模視頻預測模型GenAD。該模型通過新穎的時間推理模塊處理駕駛場景中的挑戰性動態情況，超越了一般或駕駛特定的視頻預測模型，在真實世界駕駛應用中的巨大潛力。與GenAD相關的論文收錄于CVPR 2024 Highlight。
此外，針對現有的駕駛世界模型在泛化到未見環境、關鍵細節的預測保真度以及靈活應用的動作可控性方面存在的局限性。香港科技大合上海人工智能實驗室OpenDriveLab等研究人員又提出一種高質量可控的通用自動駕駛世界模型Vista。與Vista相關的論文收錄于NeurIPS 2024。Vista能夠在高時空分辨率下預測逼真的未來，通過捕捉動態和保持結構的兩種新損失函

原文鏈接：NeurIPS 2024收錄！港科大&上海AI Lab提出高質量可控的自動駕駛世界模型Vista | 一作高深遠博士主講預告