阿里GUI Agent達到第三代：Qwen 開始同時會用手機、電腦和命令行

動察 Beating AI 快訊，阿里推出新的 GUI 智能體基座模型 Qwen-UI-Agent。它能直接看螢幕、點按鈕、輸入文字，操作手機、電腦和網頁；碰到適合命令行處理的任務，也能直接跑 CLI，不用所有事情都靠滑鼠一點點完成。

阿里做 GUI Agent 已經兩年多。2024 年的 Mobile-Agent 主要讓模型看手機截圖，再控制點按和滑動；之後的 GUI-Owl、MAI-UI 開始把 GUI 操作直接訓練進模型，並擴到電腦。Qwen-UI-Agent 又把手機、電腦、網頁、DeepSearch 和命令行放進同一個 Agent。

比如查高鐵、算到公司的時間、再去釘釘建會議，它可以跨多個 App 一路做完。做數據分析時，也可以先上網找資料，再用命令行處理數據，最後生成 Excel、PPT 和 Word。

主力模型由 Qwen3.5-27B 繼續訓練而來。在阿里自建的真機評測 MobileWorld-Real 中，它拿到 92.2%，高於同場評測的 GPT-5.6 Sol、Claude Opus 4.8 和 Gemini 3.1 Pro。