arXiv:2606.20561: TimeProVeが長時間動画の推論コストを93%削減
TimeProVeは、2段階の「提案してから検証する」アプローチを導入することで、長時間動画におけるVLMの推論を高速化するフレームワークです。高コストモデルへの呼び出しを75%削減し、推論コスト全体を93%削減しながら、新しいOpenTSUBenchベンチマークで最強の競合手法を7.3ポイント上回ります。
この記事はAIにより一次情報源から生成されました。
高コストな動画QAモデルの呼び出し頻度が4分の1に
研究者のArkaprava Sinha、Dominick Reilly、Siddharth Krishnan、Hieu Le、Srijan Dasは2026年6月18日に論文を提出し、TimeProVeを発表しました。これは長時間動画における効率的な時間推論のためのフレームワークです。論文は6月19日にarXivで公開されました（2606.20561）。
2段階「提案してから検証する」アプローチの仕組み
TimeProVeは従来の動画QAタスクを2段階に分割します。まず軽量モジュールが高コストモデルを呼び出さずに回答仮説を生成します。次にACE（Action-based Candidate Evidence）モジュールが関連する証拠を選択し、検証フェーズ専用として高コストな視覚言語モデル（VLM）に転送します。このアプローチにより、毎ステップで高コストモデルを呼び出す手法と比較して、VLM呼び出し回数が**75%削減され、推論コスト全体が93%**削減されます。
OpenTSUBench：日常活動のための新しいベンチマーク
著者たちは同時にOpenTSUBenchを発表しました。これは日常生活活動（ADL）カテゴリにおける時間的根拠に基づく推論のためのベンチマークです。このベンチマークにおいて、TimeProVeはこれまでの最強ベースラインモデルを7.3ポイント上回り、コスト削減が精度を犠牲にしないことを確認しました。
なぜ重要なのか
これまでの長時間動画向けVLMアプローチは、高コスト（各フレーム/セグメントでモデルを呼び出す）か、粗いサンプリングで精度を犠牲にするかのどちらかでした。TimeProVeは、これらの2つの目標が相互に排他的ではないことを示しています。軽量モデルと高コストモデルの間で作業をインテリジェントに分担することで、より高い精度と劇的なコスト削減の両方を達成でき、実際のシステムで数時間にわたる動画にVLMを実用的に適用する道を開きます。
よくある質問
- TimeProVeとは何ですか？どのように機能しますか？
- TimeProVeは、軽量モジュールが回答仮説を生成し、高コストなVLMはACE（Action-based Candidate Evidence）モジュールを通じた検証フェーズにのみ呼び出されるフレームワークです。これにより、コストの高いモデル呼び出し回数が大幅に削減されます。
- OpenTSUBenchとは何ですか？
- OpenTSUBenchは、日常生活活動（ADL）カテゴリにおける時間的根拠に基づく推論のための新しいベンチマークで、著者がTimeProVe手法とともに発表しました。
- TimeProVeはこれまでの最良手法をどれだけ上回りますか？
- TimeProVeはOpenTSUBenchで最強のベースラインモデルを7.3ポイント上回り、同時に推論コストを93%削減します。