港大最新成果：基于多模態大模型的腦身同步框架BBSEA｜講座預告

AIGC動態歡迎閱讀

原標題：港大最新成果：基于多模態大模型的腦身同步框架BBSEA｜講座預告
關鍵字：智能,模型,機器人,猩猩,講座
文章來源：算法邦
內容字數：3662字

內容摘要：

智猩猩機器人新青年講座由AI與硬科技知識分享社區「智猩猩」全新企劃，致力于邀請全球知名高校、頂尖研究機構以及優秀企業的青年學者，主講在具身智能、強化學習、多智能體系統、建模仿真等機器人關鍵前沿技術上的研究成果和開發實踐。
目前講座已完結6講，錯過直播的朋友，可以點擊文章底部“閱讀原文”觀看回放！具身智能包括機器人本體，和決定其智能化的大腦、小腦、腦身同步。目前大腦的研究方向是大模型，讓機器人聽懂人的語言；小腦為控制身體，掌握基本技能；腦身同步指機器人的意識訓練。
大語言模型能在語言空間中進行推理，并通過視覺輸入進行問答，但不具備環境的具身感知能力，無法與其互動。而具身智能體能與場景互動，但缺乏對物理世界的理解，無法完成具有意義的語義任務。
為此，香港大學楊言超老師團隊提出一種基于大型基礎模型的具身智能體腦身同步框架BBSEA。將包括LLMs和VLMs的大型基礎模型（Large Foundation Models，LFMs）視為一個擁有物理世界常識的“大腦”，并探索了利用大腦的非物質結構知識訓練具身智能體（身體）與物理世界的互動。與BBSEA相關的論文目前收錄在arXiv 上，其

原文鏈接：港大最新成果：基于多模態大模型的腦身同步框架BBSEA｜講座預告