摘要
UI-Venus-2(arXiv 2609.00028,9 月 2 日周三 digest,Venus Team 署名 31 位作者)是通用的开源 GUI agent 基座,通过统一的闭环「推理-行动」框架覆盖移动、网页与桌面。它同时扩展三个维度:环境(170+ 多语言移动应用 + 原生桌面操作系统)、任务(深度研究流水线生成以功能为锚点的指令)、验证(结合视觉关键点与多模型投票的轨迹级、样本级评估器,保证 RL 训练信号可靠)。另含针对后果性动作的安全感知机制,定位为面向更可泛化、可验证、自反思 agent 的开放基座。
为什么重要
computer-use agent 的成败取决于 RL 信号的可靠性,最难的一环是轨迹级的可验证奖励。这次发布把环境、任务生成、两层验证器设计打包成一个开放整体——对自建 GUI agent 的团队是直接可参照的样板,也是该方向迄今最完整的开源配方。
技术细节
| ArXiv | 2609.00028,2026 年 9 月 2 日周三 digest 宣告(8/27 提交) |
|---|---|
| 范围 | 通用 GUI agent 基座:移动 + 网页 + 桌面,统一闭环「推理-行动」框架 |
| 环境 | 170+ 多语言移动应用 + 原生桌面操作系统 |
| 任务 | 深度研究流水线生成以功能为锚点的指令 |
| 验证 | 轨迹级 + 样本级评估器:视觉关键点 + 多模型投票,目标是可靠的 RL 信号 |
| 安全 | 针对后果性动作的安全感知机制 |
| 开放性 | 摘要自述开源;抓取时 arXiv 摘要页未给出具体仓库链接 |
标签
computer-usegui-agentopen-sourcerlverificationagent