AutoDroid-V2

AutoDroid-V2 – 清華推出的移動端GUI自動化腳本代理

AutoDroid-V2是什么

AutoDroid-V2是由清華大學人工智能產業(yè)研究院開發(fā)的一款基于小型語言模型（SLM）的移動端GUI自動化腳本代理。該產品運用代碼生成技術，顯著提升設備上的圖形用戶界面（GUI）代理性能。通過分析應用的探索歷史，AutoDroid-V2能夠自動生成詳細的應用文檔，指導小型語言模型生成多步驟腳本，從而完成復雜的用戶任務。與傳統(tǒng)的逐步GUI代理相比，AutoDroid-V2在任務完成率和執(zhí)行效率方面有了顯著提升，同時減少對大型云模型的依賴，降低用戶隱私風險和服務成本。多個基準測試表明，AutoDroid-V2在設備上全面部署GUI代理具有廣闊的前景。

AutoDroid-V2

AutoDroid-V2的主要功能

自動化UI任務執(zhí)行：通過生成和執(zhí)行多步驟腳本，AutoDroid-V2能夠自動完成用戶在移動設備上的各種界面操作，如打開應用、輸入文本和點擊按鈕等。
代碼生成與執(zhí)行：將UI任務自動化轉化為代碼生成問題，利用設備上的小型語言模型生成可執(zhí)行代碼腳本，并通過代碼解釋器高效執(zhí)行。
應用文檔生成：自動分析應用的探索歷史，生成詳細的應用文檔，記錄應用的GUI狀態(tài)、關鍵元素及其交互關系，以支持腳本生成。

產品官網

欲了解更多信息，請訪問AutoDroid-V2的官方網站。

AutoDroid-V2的應用場景

日常生活輔助：在用戶忙碌時，自動根據消息內容進行回復，例如自動回復工作郵件或朋友的問候，確保重要信息不被遺漏。
日常工作：在會議中自動記錄討論內容，提取關鍵信息并生成會議紀要，方便會后回顧和執(zhí)行相關任務，提高會議效率。
應用測試：在應用更新后，自動執(zhí)行回歸測試用例，檢查新版本的功能是否正常，及時發(fā)現并修復潛在的缺陷，確保應用的穩(wěn)定性和可靠性。
智能家居：根據用戶的作息習慣和環(huán)境光線，自動調節(jié)家庭燈光的亮度和色溫，例如晚上自動調暗燈光，以營造舒適的睡眠環(huán)境，提升生活質量。
特殊行業(yè)應用：在患者出院后，自動發(fā)送隨訪提醒和健康問卷，收集患者的康復情況，幫助醫(yī)生及時了解患者病情變化，提供更好的后續(xù)治療和康復指導。