北大提出首個通用指令導航大模型系統 | CoRL 24

AIGC動態歡迎閱讀

原標題：北大提出首個通用指令導航大模型系統 | CoRL 24
關鍵字：價值,指令,任務,地圖,機器人
文章來源：量子位
內容字數：0字

內容摘要：

董豪團隊 投稿量子位 | 公眾號 QbitAI想象一下當你躺在沙發上，只需要不假思索地說出指令，機器人就能幫你干活，是不是聽起來就十分愜意？
如今這種科幻電影中的場景正在變為現實，來自北京大學的助理教授、博士生導師董豪團隊近日提出首個通用指令導航大模型系統InstructNav。
不論是尋找物體，走到指定位置，還是滿足抽象的人類需求，只要你說出指令，InstructNav都能幫你實現。
目前該工作已經被CoRL（Conference on Robot Learning）2024會議錄用，文章可在Arxiv瀏覽，代碼也即將在近期開源。
大模型如何統一具身指令導航規劃？不同的導航任務要求截然不同的能力，經典的物體導目標航任務需要理解房間結構和物體之間的聯系，視覺語言導航任務側重于嚴謹地遵循指令，而新興的需求驅動的導航任務要求根據人類抽象需求進行語義推理。
先前研究工作都圍繞某一種特定類型的指令設計一個特定類型的導航方法，然而在真實應用中，人類可能向機器人下達不同形式的指令，甚至混合類型指令，現有的具身導航模型都無法滿足這樣的實際需求，因此實現通用指令導航對于機器人在現實世界的應用充滿價值。

原文鏈接：北大提出首個通用指令導航大模型系統 | CoRL 24

聯系作者

文章來源：量子位
作者微信：
作者簡介：