过去两年,GUI 智能体(让模型直接看屏幕、点按钮、敲键盘的 Agent)一直被两件事卡住:交互环境太贵,以及像样的训练任务太少。前沿模型在数学和代码上已经能靠"可验证奖励"吃到大规模在线强化学习的红利,但这套打法搬到 GUI 上就失灵了——你没法让数学答案自动判对错,也很难在几十台真机上并行跑出几十万条轨迹。

阿里通义 MAI 团队这次放出来的 MAI-Gym,试图把评测、数据采集和训练三件事焊进同一条流水线里,一次解决这两道坎。

关键设计:评测和训练共用一条 rollout 流水线

这是整套平台最核心的取舍。如果评测用的执行环境和训练用的执行环境是两套代码,那你今天测出来的分数,和明天训出来的模型,中间就隔着一层永远对不齐的偏差。MAI-Gym 把两者合并成同一条 rollout pipeline,让智能体在评测和训练里的行为保持一致。

在这个基础上,平台支持十个既有基准,并能把并行环境实例扩展到 20,000 个。对做 Agent 训练的人来说,这个数字比听上去重要得多——在线 RL 的强度直接取决于你能同时开多少个交互环境。

不只是基础设施:自动造 App 和任务

光有并行环境还是不够,因为真实环境的任务标注极其昂贵。所以平台还做了一件事——自动合成 GUI 应用和困难任务,包括可重置的 mock 应用,以及能让任务跨多个 App 保持连贯性的"跨 App 世界",并且配上了基于执行的任务验证器(verifier),任务是否完成由实际跑一遍来判定,而不是靠人写标签。

据论文介绍,任务生成过程会参考模型的弱点来定向出题。发布内容包含 49 个模拟应用、2,000 条经执行验证的任务,以及可复用的合成技能(synthesis skills)。

MAI-Gym-9B:一个模型管手机和桌面

用这套平台做联合在线 RL 训练,团队得到一个统一的 9B 模型 MAI-Gym-9B,同时处理移动端和桌面端操作。论文报告它在 MobileWorld 上取得 78.4%、在 OSWorld-Verified 上取得 76.2%,并称这是 10B 参数以下开放 GUI 智能体中的领先水平——这个说法来自论文作者自己的评测,其他团队还没有独立复现过。

更有意思的一个数字来自迁移实验:在一个 mock 的火车票订购 App 上做 RL 训练,策略迁移到真实手机上的对应 App 后,任务成功率从 28.8% 提升到 48.1%。这说明 mock 环境造出来的训练信号,确实能穿过仿真与现实之间的缝隙。

我的看法:GUI Agent 的瓶颈正在从模型转向环境工程

过去两年的行业叙事几乎都压在模型侧——参数、上下文长度、多模态能力。但 GUI Agent 真正的落地卡点,正在悄悄移到另一侧:环境怎么搭、任务怎么验、并行度能堆到多少。

MAI-Gym 把这些工程问题打包成一个开源平台,连模型权重一起放出来,意味着任何人搭一套自己的 Agent 流水线时,不必从零开始抠这些细节。当然,模拟环境到真实世界的迁移仍然是最大的不确定性——28.8% 到 48.1% 说明迁移确实有效,但也说明迁移之前的效果相当有限,一半以上的任务在真机上直接失败。

所以这条新闻的看点不只是"又一个 9B 模型跑分",而是开源社区第一次拿到了一个把评测、合成、训练、验证串起来的完整闭环。论文、代码和权重都已放出(详见 Hugging Face 论文页),接下来值不值得关注的,是有多少人能在这个底座上跑出自己的智能体。

当"可验证奖励"从数学题蔓延到每一次点击和每一次滑动,Agent 训练的规模化才算真正开始。