arXiv:2607.11185: SCALECUA通过强化学习扩展计算机使用代理——OSWorld得分68.7%
SCALECUA是清华大学/THUDM研究人员提出的新框架，通过在线强化学习扩展计算机使用代理，在OSWorld基准测试中取得68.7%的新SOTA成绩，在ScienceBoard上达到54.0%。
本文由人工智能基于一手来源生成。
什么是计算机使用代理与强化学习？
计算机使用代理是一种通过图形用户界面自主操控计算机的AI系统——它像人类一样执行点击、键入和屏幕导航操作，无需API访问或专用程序接口。**强化学习（RL）**是一种通过试错进行学习的机器学习方法：成功完成任务时获得奖励，失败时受到惩罚。将这两种方法结合——用RL训练计算机使用代理——此前受限于缺乏可验证的训练任务。
SCALECUA：架构与核心成果
来自清华大学和THUDM实验室的研究人员发布了SCALECUA（Scaling Computer Use Agents with Verifiable Task Synthesis and Efficient Online RL），该框架正是针对上述问题而设计。系统在OSWorld基准测试中取得68.7%准确率——OSWorld是评估计算机使用代理在真实操作系统任务上表现的标准基准——在ScienceBoard上达到54.0%，后者涵盖更复杂的科学任务。两项结果均创下新的SOTA（最先进）水平，即该类AI系统迄今最佳公开性能。相比之下，此前领先模型在OSWorld上的成绩低于60%，这意味着SCALECUA带来了超过8个百分点的可量化提升。
VeriGen：逾24,000个可验证的RL训练任务
本文的核心贡献是VeriGen系统，它能自动生成用于RL训练的可验证任务。研究人员借助该系统合成了逾24,000个可验证任务，并从中筛选出约3,000个高质量RL任务。可验证性的关键优势在于代理能立即获得明确奖励——任务要么完成，要么未完成，无需昂贵的人工评估。
训练效率与可扩展性
SCALECUA还引入了Visual Context Segmentation——一种帮助模型将注意力聚焦于屏幕相关区域、降低计算负担的机制。结果是与朴素方法相比实现了2.83倍训练加速。该系统设计支持扩展至逾100个并行代理工作者，使其适用于分布式计算环境，并为进一步扩大RL任务集规模开辟了道路。
常见问题
- 什么是计算机使用代理？
- 计算机使用代理是一种通过图形用户界面自主操控计算机的AI系统——像人类一样执行点击、键入和屏幕导航操作。
- 什么是强化学习（RL），如何应用于代理？
- 强化学习是一种机器学习方法，代理通过与环境交互并在正确动作上获得奖励来学习——在计算机使用代理的语境中，当代理成功完成计算机任务时获得奖励。
📬 AI 新闻直达您的邮箱
按您的方式定制每日摘要——自选主题、来源和频率，一键退订。