arXiv:2607.11185: SCALECUAがRLでコンピュータ使用エージェントをスケール——OSWorld 68.7%

コンピュータ使用エージェントとRLとは

コンピュータ使用エージェントはGUIを通じて自律的にコンピュータを操作するAIシステムです——APIアクセスや専用プログラムインターフェースなしに、人間のようにクリック、入力、画面ナビゲーションを行います。**強化学習（RL）**は試行錯誤を通じて学習する機械学習手法で、タスクを成功させると報酬を受け取り、失敗すると罰を受けます。この2つを組み合わせてコンピュータ使用エージェントをRL訓練することは、検証可能な訓練タスクの不足により制限されていました。

SCALECUA：アーキテクチャと主要結果

清華大学とTHUDM研究室の研究者がSCALECUA（Scaling Computer Use Agents with Verifiable Task Synthesis and Efficient Online RL）を発表しました。このフレームワークはまさにその問題に対処します。システムはOSWorldベンチマークで68.7%の精度——コンピュータ使用エージェントを実際のOSタスクで評価する標準ベンチマーク——と、より複雑な科学タスクをカバーするScienceBoardで54.0%を達成しました。どちらも新しいSOTA（最先端）結果を表しています。比較として、以前の最高モデルはOSWorldで60%未満であり、SCALECUAは8ポイント以上の改善をもたらしています。

VeriGen：24,000以上の検証可能なRLタスク

本研究の中心的な貢献はVeriGenシステムで、RL訓練用の検証可能なタスクを自動生成します。研究者はこれを用いて24,000以上の検証可能なタスクを合成し、そこから約3,000の高品質RLタスクを絞り込みました。検証可能性の主要な利点は、エージェントが明確な報酬をすぐに得られることです——タスクは完了したかどうかで判断され、高コストの人間による評価が不要です。

訓練効率とスケーラビリティ

SCALECUAはVisual Context Segmentationも導入しています。これはモデルが画面の関連部分に注意を集中させ、計算コストを削減するメカニズムです。その結果、単純なアプローチと比べて2.83倍の訓練高速化が実現しました。システムは100以上の並列エージェントワーカーへのスケールを想定して設計されており、分散コンピューティング環境への適用が可能で、RLタスクセットのさらなる拡大への道を開いています。