銀河通用王鶴：讓具身智能機器人“言出法隨”，需攻克兩大局限性丨GenAICon 2024

AIGC動態歡迎閱讀

原標題：銀河通用王鶴：讓具身智能機器人“言出法隨”，需攻克兩大局限性丨GenAICon 2024
關鍵字：模型,機器人,物體,數據,解讀
文章來源：智東西
內容字數：0字

內容摘要：

沒有做好小模型的公司、沒有能讓動作小模型泛化的公司不可能讓大模型泛化。
2024中國生成式AI大會于4月18-19日在北京舉行，在大會第一天的主會場開幕式上，北京大學助理教授、銀河通用機器人創始人&CTO、智源具身智能中心主任王鶴以《通向開放指令操作的具身多模態大模型系統》為題發表演講。
成立于2023年5月的銀河通用機器人，是國內具身智能代表初創公司之一，迄今已完成4輪融資，美團是公司外第一大外部股東，北大燕緣創投、清華無限基金SEE Fund均是投資方，其累計融資額已超過1億美元。
作為國內具身智能領域資深專家，王鶴詳細解讀了具身智能大模型的定義、范圍和關鍵技術。他談到目前面向通用機器人的具身多模態大模型的局限在于數據來源有限、很難高頻輸出動作。應對這兩大挑戰的方向，一是通過仿真世界提供訓練數據，二是采用三維模態模型提升泛化性和速度。
對此，銀河通用機器人構建了三層級大模型系統，包括硬件、仿真合成數據訓練的泛化技能、大模型等。基于該系統，機器人可實現跨場景、跨物體材質、跨形態、跨物體擺放、依據人類語音指令進行的開放語義泛化抓取，成功率達95%。
以下為王鶴的演講實錄：
今天我帶來的

原文鏈接：銀河通用王鶴：讓具身智能機器人“言出法隨”，需攻克兩大局限性丨GenAICon 2024