ArXiv GUI-SD：GUIグラウンディング向け初のオンポリシー自己蒸留フレームワーク、6つのベンチマークでGRPO強化学習を凌駕

Yan Zhang、Daiqing Wu、Huawen Shenは2026年5月1日にArXivで論文**「Learn where to Click from Yourself: On-Policy Self-Distillation for GUI Grounding」を発表しました。彼らはGUI-SD**——GUIグラウンディングタスク専用に設計された初のOPSD（オンポリシー自己蒸留）フレームワークを提案しています。

GUIグラウンディングとは何で、なぜエージェントの基盤なのか？

GUIグラウンディングは自然言語の指示（例：「保存ボタンをクリックして」）を画面上のターゲット要素の正確な視覚座標にマッピングする能力です。この能力なしに、自律型GUIエージェントはコンピューターアプリケーションを本当にナビゲートすることができません——ユーザーに何をクリックすべきか提案することしかできません。

GUIエージェントは2026年に成長しているカテゴリーです（Anthropic Claude Computer Use、OpenAI Operator、Google Gemini Computer Use）。これらのエージェントはすべてグラウンディングの精度によって制限されます：エージェントが「保存をクリックして」と言って座標が20ピクセルずれると、間違った場所をクリックしてワークフローが失敗します。

なぜ強化学習ではなく自己蒸留なのか？

最近のRL手法（GRPO——グループ相対ポリシー最適化など）は強力な結果を達成しますが、著者らが指摘する2つの深刻な欠点があります：

1. 高価な複数のロールアウト — 各トレーニングステップで答えの分布を生成するためにモデルを複数回実行する必要がある
2. 難しい例でのスパース信号 — モデルが継続的に失敗する場合、RLグラジエントが実質的に消える

**オンポリシー自己蒸留（OPSD）**は両方の問題を解決します。単一のロールアウトから密なトークンレベルの監督信号を提供します——出力内の各トークンは、軌跡全体が成功したかどうかに関わらず、明確なトレーニング目標を持っています。これにより、トレーニングはより効率的で安定します。

GUI-SDはGUIグラウンディングに適応した初のOPSDフレームワークです。以前のOPSD研究は主にNLPタスクや分類をカバーしていました。

GUI-SDをグラウンディングに特有にするものは？

システムは2つの主要なメカニズムを使用します：

特権的視覚コンテキスト — 教師モデルはターゲットバウンディングボックスとガウスソフトマスクで豊かにされた画像を受け取ります。ソフトマスクは教師に目標の場所の強いヒントを与えますが、正確な座標は明かしません。そのため教師は依然としてピクセル化について「考える」必要があります。これは自己蒸留の古典的な問題を解決します——教師は学生より情報量が多すぎてはなりません。そうでないと「カンニング者」になってしまいます。

エントロピーガイド蒸留 — トークンの重みは2つのことに依存します：(a) 座標出力における桁の重要性（例：座標の最上位桁は最下位桁より重要）、(b) その位置での教師の信頼度。重要かつ信頼できるトークンは大きな重みを受け取り、最も価値ある場所に最適化を集中します。

改善効果はどのくらいか？

6つの代表的なGUIグラウンディングベンチマークでの実験では、GUI-SDがGRPOベースの手法とナイーブなOPSDを2つの次元で一貫して上回ることが示されました：

• グラウンディング精度（最終的にエージェントの成功を決定する値）
• トレーニング効率（同じ結果に必要な計算量が少ない）

各ベンチマークの具体的な数字は論文本文に記載されていますが、要約は明確です：単一のロールアウト+エントロピーガイド重み付け+教師の特権的コンテキストの組み合わせが、グラウンディングトレーニングの優位なデザインです。

論文はArXivでID 2605.00642として公開されています。