AutoGLM是一款由智譜AI團(tuán)隊(duì)最新開(kāi)發(fā)的“Phone Use”智能體，旨在通過(guò)圖形用戶(hù)界面（GUI）完成自主任務(wù)。它能夠模仿人類(lèi)在手機(jī)上的操作，處理社交媒體互動(dòng)、在線(xiàn)購(gòu)物、酒店預(yù)訂等多種任務(wù)。用戶(hù)只需提供簡(jiǎn)單的文字或語(yǔ)音指令，AutoGLM便能自動(dòng)執(zhí)行復(fù)雜的操作流程，無(wú)需任何手動(dòng)干預(yù)。

AutoGLM是什么

AutoGLM是智譜AI團(tuán)隊(duì)新推出的一款“Phone Use”智能體，借助圖形用戶(hù)界面（GUI）實(shí)現(xiàn)自主任務(wù)執(zhí)行。它能夠模擬人類(lèi)在手機(jī)上的操作，處理社交媒體互動(dòng)、在線(xiàn)購(gòu)物、酒店預(yù)訂等多種任務(wù)。用戶(hù)通過(guò)簡(jiǎn)單的文字或語(yǔ)音指令，AutoGLM能夠自動(dòng)完成復(fù)雜的操作，無(wú)需用戶(hù)手動(dòng)參與。

AutoGLM的核心技術(shù)包括基礎(chǔ)智能體解耦合中間界面和自進(jìn)化在線(xiàn)課程強(qiáng)化學(xué)習(xí)框架，這使得AutoGLM能夠精確執(zhí)行動(dòng)作并靈活規(guī)劃任務(wù)，有效克服了傳統(tǒng)大模型智能體在動(dòng)作執(zhí)行精度和任務(wù)規(guī)劃靈活性方面的不足。目前，AutoGLM正在進(jìn)行內(nèi)測(cè)，首批用戶(hù)為部分清言用戶(hù)（目前僅支持安卓系統(tǒng)）。

AutoGLM的主要功能

• 模擬人類(lèi)手機(jī)操作：通過(guò)文字或語(yǔ)音指令，完成如微信點(diǎn)贊、評(píng)論、淘寶購(gòu)物、攜程酒店預(yù)訂、12306購(gòu)票、美團(tuán)外賣(mài)等多項(xiàng)任務(wù)。
• 實(shí)時(shí)響應(yīng)：能夠快速響應(yīng)用戶(hù)指令，在手機(jī)上執(zhí)行復(fù)雜的操作序列。
• 無(wú)須API支持：不依賴(lài)特定的API接口，直接與圖形用戶(hù)界面交互。
• 自動(dòng)化任務(wù)執(zhí)行：在真實(shí)環(huán)境中執(zhí)行自動(dòng)化任務(wù)，簡(jiǎn)化用戶(hù)的操作流程。

AutoGLM的技術(shù)原理

• 基礎(chǔ)智能體解耦合中間界面：通過(guò)自然語(yǔ)言指令將任務(wù)規(guī)劃與動(dòng)作執(zhí)行進(jìn)行解耦，提升智能體的操作能力及靈活性。
• 自進(jìn)化在線(xiàn)課程強(qiáng)化學(xué)習(xí)框架：在真實(shí)在線(xiàn)環(huán)境中學(xué)習(xí)并提升智能體的能力，基于自適應(yīng)學(xué)習(xí)策略不斷進(jìn)行自我改進(jìn)。
• 任務(wù)規(guī)劃與動(dòng)作執(zhí)行的分離：通過(guò)中間界面設(shè)計(jì)，使任務(wù)規(guī)劃與動(dòng)作執(zhí)行能夠優(yōu)化，提升執(zhí)行的準(zhǔn)確性。
• 動(dòng)態(tài)調(diào)整學(xué)習(xí)任務(wù)難度：根據(jù)智能體的能力水平，動(dòng)態(tài)調(diào)整學(xué)習(xí)任務(wù)的難度，以最大化模型的潛能。
• 策略更新與經(jīng)驗(yàn)回放：通過(guò)KL散度控制策略更新和智能體置信度經(jīng)驗(yàn)回放，減輕模型在迭代訓(xùn)練中的遺忘現(xiàn)象。

AutoGLM的項(xiàng)目地址

• 項(xiàng)目官網(wǎng)：xiao9905.github.io/AutoGLM
• AutoGLM內(nèi)測(cè)申請(qǐng)地址：ai-bot.cn/sites/2005.html

AutoGLM的應(yīng)用場(chǎng)景

• 社交媒體管理：在社交平臺(tái)上自動(dòng)進(jìn)行點(diǎn)贊、評(píng)論和分享等操作。
• 在線(xiàn)購(gòu)物：在電商平臺(tái)上搜索商品、比較價(jià)格、下單并跟蹤物流。
• 旅行預(yù)訂：在旅游網(wǎng)站上查找并預(yù)訂酒店、機(jī)票和火車(chē)票等。
• 外賣(mài)訂購(gòu)：在外賣(mài)平臺(tái)上瀏覽菜單、下單、付款以及追蹤訂單狀態(tài)。
• 日常信息查詢(xún)：如天氣、新聞、股票等信息的查詢(xún)。

常見(jiàn)問(wèn)題

• AutoGLM支持哪些設(shè)備？：目前僅支持安卓系統(tǒng)，正在進(jìn)行內(nèi)測(cè)。
• 如何申請(qǐng)內(nèi)測(cè)？：請(qǐng)?jiān)L問(wèn)內(nèi)測(cè)申請(qǐng)地址進(jìn)行申請(qǐng)。
• AutoGLM的指令如何輸入？：用戶(hù)可以通過(guò)文字或語(yǔ)音形式輸入指令。
• AutoGLM的操作安全性如何保障？：AutoGLM設(shè)計(jì)有多重安全機(jī)制，確保用戶(hù)數(shù)據(jù)的安全性和隱私。