ArXivフレームワーク「呼ぶべきか否か」がLLMの外部ツール判断ミスを明らかに

Max Planck Institute for Software Systems、Imperial College、Helmholtz MunichのQinyuan Wuらが2026年5月1日に発表したこのフレームワークは、本番AIエージェントの最もコストがかかる問題の一つを直接解決する：モデルが外部ツールを呼び出す必要がある場合と、そうでない場合をどう判断するか。論文タイトル——「To Call or Not to Call」——は実際に秒単位のレイテンシ、ドル単位のAPIコスト、パーセンテージ単位の精度に影響するジレンマを要約している。

出発点はツール呼び出しが常に有益なわけではないことだ。一部は冗長で、一部は実際に有害だ。ウェブ検索はモデルを混乱させるノイズの多い情報をもたらす可能性があり、計算機はモデルがすでに知っている単純な計算のために呼び出される可能性があり、データベースはコンテキストを過負荷にする無関係な行を返す可能性がある。

ツール呼び出し評価の3つの次元は何か？

フレームワークは各潜在的ツール呼び出しを3つの直交次元で測定する：必要性（タスクはそもそもツールを必要とするか？）、効益（使用時に結果が改善されるか？）、コスト許容性（追加のレイテンシと費用は正当か？）。3つすべてが肯定的でなければ呼び出しは合理的でない。

差異は微妙だが重要だ：ツールは必要（タスクが客観的にそれを要求する）だが効益なし（モデルはそれなしでも精度を達成する）かもしれない。あるいはリアルタイムシナリオではコストのために利用不可能だが有益（精度を向上させる）かもしれない。

著者はどのようにモデルの自己評価と現実を比較するか？

アプローチは2つの視点を組み合わせる。規範的評価はグラウンドトゥルースから：タスクXに対して、どのツール呼び出しが最適に呼ばれるべきか？記述的はモデルの行動から：モデルはどの呼び出しを必要と考えるか？

両者の差異は体系的な誤りを明らかにする。モデルはしばしば役に立たないツールを呼び出し（ウェブ検索が主な原因）、時に有益なツールを見逃す。言い換えると、自己評価は信頼できるシグナルではない。

隠れ状態からの軽量推定器

主要な技術的貢献は著者がモデル自体の隠れ状態から必要性と効益を予測する軽量推定器をトレーニングすること——追加のAPI呼び出しなし。これらの推定器はモデルが「考える」ことに関係なく、ツール呼び出しが必要かどうかを決定するコントローラーの基盤となる。

3タスクと6モデルでの実験は、コントローラーが組み合わせた精度とコストの観点でモデルの自己評価を一貫して上回ることを示す。

これはAIエンジニアにとって何を意味するか？

LangGraph、AutoGen、またはAnthropicのコンピュータツールでエージェントを構築するチームにとって、論文は一般的な直感を検証する：ツールが必要かどうかをモデル自身に決めさせないで——ゲーティングレイヤーを設定する。 これまでヒューリスティックだった実践が、今や正式なフレームワークと実証的結果を持つ。

より広い含意はエージェントの経済性にも影響する：本番システムが20〜30%の不要なツール呼び出しを回避できれば、1日100万リクエストの規模では、APIコストの削減だけで月に相当な節約になる。