arXiv: CVPモニターが言語モデルの活性化から優先度競合を直接読み取る

研究者のTong CheとRui Wuは、1つの生成トークンも読まずに言語モデルの内部優先度競合を活性化から直接追跡できると主張するフレームワークを発表した。**Constitutional Value Potentials（CVP）**と名付けられたこのフレームワークは、モデルの隠れ状態から学習したスカラー値を導入し、特定の憲法的価値を保持するための内部的な「圧力」を表す。出発点となる観察は鋭い：出力テキストは2つの価値が衝突してどちらかを犠牲にしなければならない瞬間に最も信頼できない証人だ——口頭で価値を述べるすべてのモデルが、その優先度を実際に尊重するわけではない。

優先度マージン：内部態度の尺度として

各憲法的価値についてCVPはモデルの隠れ状態からスカラーポテンシャルを学習する。監視の核心的な区別はここにある：そのポテンシャルはプロンプト自体で教師あり学習されるのではなく、モデルが応答で実際に何を保持したかを見る審査員による独立した評価で学習される（何を大切にすると述べたかではなく）。2つのポテンシャルの符号付き差が優先度マージンを形成する。マージンが正のまま維持される限り、憲法的条項は満たされている；ゼロを下回った瞬間、モニターは潜在的な違反にフラグを立てる。検出メカニズム全体は、モニターがモデルの出力トークンを1つも読まずに機能する——検出は活性化空間にのみ存在する。

モニターは応答終了前に違反にフラグを立てられるか？

はい。シグナルは入力プロンプトの末尾と応答の最初のトークンに現れる。つまり潜在的な違反は、モデルがまだテキストを生成している間に見えるということだ——完成した応答の事後分析ではなく予防的検出だ。敵対的なシナリオにとってこれは特に重要だ。これまでのレッドチーミングツールは主に「プロンプトが攻撃的に見えるか」という問いに答えていた。CVPは別の、より正確な診断を設定する：敵対的な試みが実際にモデルの内部優先度マージンを違反に向けてシフトさせたのか、それともモデルは攻撃的な表現にもかかわらず安定を保ったのか？この2つの状況は全く異なるが、出力分析ではそれを確実に区別できない。

AUROC 0.95と新しい競合への汎化

モニターは価値競合の検出でAUROC最大0.95を達成し、隠れ状態に基づく強力なプローブ手法を上回る。実験はQwen2.5の3スケールのモデルをカバーし、汎化はトレーニング中に見られなかったホールドアウト合成競合でテストされた。これは実用的な適用にとって重要な条件だ：実際の環境では真の価値競合は事前にわからないため、見たパターンにのみ機能するモニターは限定的な運用価値しかない。ホールドアウトセットの結果は、CVPがトレーニングパターンとの表面的な相関ではなく、活性化空間の優先度関係の構造的特性を捉えていることを示唆する。

検出と制御の両方に同じ活性化を使用

検出に加えて、著者は活性化ステアリングをテストした：個々の価値に関連する活性化方向に沿って動かすことで、モデルの推定トレードオフ決定を望ましい方向にシフトする。著者はこれを概念実証として説明しており、完成した本番ツールではない——しかし知見は概念的に重要だ。行動を予測するシグナルとその行動を変える方向の違いは、活性化空間が優先度の決定に関連する構造化された（ランダムでない）表現を含んでいることを示す。これにより、CVPは診断ツールだけでなく制御メカニズムになる可能性もある。

レッドチーミングとConstitutional AIへの関連性

CVPは同時にいくつかの活発な研究ラインに対処する。Constitutional AI手法として：このフレームワークは、テスト時の言語的振る舞いのみから評価するのではなく、モデルの表現に憲法がどの程度内部化されているかを測定可能なシグナルを提供する。アライメント監視として：優先度マージンの追跡は最終出力に依存しない予防的シグナルを提供する。レッドチーミングとして：攻撃的に見えるプロンプトと内部優先度を実際に変えるプロンプトの違いが定量化された値になる。

著者は認識論的な正確さを強調する：CVPはモデルが哲学的な意味で価値を持つと主張しない。知見は、活性化空間がモデルの優先度の決定と共変するシグナルを含んでおり、それらのシグナルを学習・監視・早期警告に使用できるということだ。CVPはモデルの重みに変更を必要とせず、隠れ状態を公開するシステムへの外部モニターとして適用可能だ。研究はarXivに透明に文書化された方法論とメトリクスで公開されており、独立した再現とさらなる開発のために研究コミュニティが利用できる。