arXiv: CVP监控器直接从语言模型激活中读取优先级冲突

研究人员童策和吴锐发布了一个框架，声称语言模型的内部优先级冲突可以直接从激活中追踪——无需读取任何一个生成的token。该框架名为Constitutional Value Potentials（CVP），引入从模型隐藏状态中学习的标量值，代表维护特定宪法价值的内部「压力」。核心观察是鲜明的：在两种价值发生冲突时，输出文本恰恰是最不可靠的证人——此时模型必须牺牲一个价值——并非每个口头引用价值的模型都真正尊重其优先级。

优先级边距作为内部立场的衡量标准

对于每个宪法价值，CVP从模型的隐藏状态中学习标量势能。监督的关键区别在于：该势能不是由提示本身监督的，而是由独立评判者的评估监督——评判者关注模型在响应中真正保留了什么，而非它声称自己重视什么。两个势能的符号差构成优先级边距。当边距保持正值时，宪法条款被认为满足；一旦降至零以下，监控器便标记潜在违规。整个检测机制无需监控器读取模型的任何一个输出token——检测完全存在于激活空间中。

监控器能否在响应结束前标记违规？

可以。信号出现在输入提示的尾部和响应的第一个token。这意味着在模型仍在生成文本时，潜在违规便已可见——预防性检测，而非对完成响应的事后分析。对于对抗性场景，这尤为重要。现有的红队工具主要回答提示看起来是否具有攻击性。CVP提出不同的、更精确的诊断：对抗性尝试是否真正改变了模型的内部优先级边距朝向违规，还是模型尽管措辞具有攻击性仍保持稳定？这两种情况截然不同，但输出分析无法可靠地加以区分。

AUROC 0.95与对新冲突的泛化

监控器在检测价值冲突时AUROC可达0.95，优于基于隐藏状态的强探针方法。实验涵盖三种规模的Qwen2.5模型，并在训练中未见过的留出合成冲突上测试了泛化能力。这是实际应用的关键条件：在真实环境中，真正的价值冲突事先未知，因此只能在已见模式上工作的监控器的操作价值有限。留出集的结果表明CVP捕捉到了激活空间中优先级关系的结构特征，而非训练模式的表面相关性。

相同激活用于干预和控制

除检测外，作者还测试了激活引导：沿与特定价值相关的激活方向移动，也会在期望方向上移动模型估计的权衡决策。作者将其描述为概念验证，而非成熟的生产工具——但这一发现在概念上很重要。预测行为的信号与改变该行为的方向之间的区别表明，激活空间包含与优先级决策相关的结构化而非随机的表征。这使CVP潜在地成为一种控制机制，而不仅仅是诊断工具。

对红队测试和Constitutional AI的意义

CVP同时解决了几条活跃的研究线索。对于Constitutional AI作为方法：该框架提供了可衡量的信号，表明宪法在模型表征中内化的程度，而不是仅仅从测试中的语言行为来评估。对于对齐监控：追踪优先级边距提供了不依赖最终输出的主动信号。对于红队测试：看起来具有攻击性的提示与真正改变内部优先级的提示之间的差异成为可量化的量。

作者强调认识论上的精确性：CVP并不声称模型具有哲学意义上的价值。发现是，激活空间包含与模型优先级决策协变的信号，这些信号可以被学习、追踪并用于早期预警。CVP不需要对模型权重进行任何修改，可作为外部监控器应用于任何公开隐藏状态的系统。该论文发布于arXiv，方法论和指标有透明文档记录，供研究界独立复现和进一步开发。