arXiv：ABC-Bench——AI代理在所有生物安全任务上超越专业生物学家

研究团队发布了ABC-Bench（Agentic Bio-Capabilities Benchmark）——第一个专为系统衡量AI代理在生物安全相关任务上的能力而设计的标准化基准测试。作者Andrew Bo Liu、Samira Nedungadi、Bryce Cai、Alex Kleinman、Harmon Bhasin和Seth Donoughe开发了该基准测试，以填补一个关键空白：此前不存在用于评估AI代理在生物研究中两用风险（dual-use）的实证工具。这篇18页的论文已被ICML 2026接受。

三类生物安全任务

ABC-Bench涵盖三类任务，之所以选择这些任务，是因为它们覆盖了此前需要具有多年实验室经验的经验丰富生物学家才能胜任的真实能力：

1. 液体处理机器人编程 — 代理为自动化实验室设备编写脚本，具体是为OpenTrons机器人移液管编程。该任务需要对实验室协议和机器人编程接口（API）有精确的掌握。

2. DNA片段设计用于计算机辅助组装 — 代理设计DNA片段序列，用于特定基因构建体的计算机辅助组装。该任务结合了生物信息学和分子生物学知识。

3. 绕过DNA合成筛查（evading DNA synthesis screening）— 代理尝试生成能通过商业DNA合成提供商安全过滤器的序列。这是一个直接与生物安全相关的类别，具有明确的滥用维度。

AI代理能否在高风险任务上替代专业生物学家？

ABC-Bench研究的关键发现是明确的：所有测试的LLM代理在三类任务上均超越了中位数专业生物学家。作者强调，代理在基于已发表知识和记录协议的任务上表现尤为出色——这是语言模型凭借训练数据规模具有结构性优势的领域。

另一方面，在需要超出现有文献范围的新型生物信息学推理的任务上，表现相对较弱——在这些情况下，有经验的研究人员仍保持基于实验工作积累的直觉优势。

这一发现并非在整体意义上声称AI取代了生物学家。但它表明，某些特定的、高风险的能力——此前受到专业知识复杂性的保护——现在通过AI代理变得可及，这些代理可以在没有正式学术或机构专业知识的情况下运作。

湿实验室验证

该研究特别重要的方面是湿实验室验证（wet-lab validation）。当OpenAI o4-mini-high模型为OpenTrons机器人生成脚本时，这些脚本在真实实验室环境中进行了测试。结果：脚本以预期结果成功组装了DNA序列。

这一湿实验室验证将ABC-Bench与纯软件基准测试区分开来。这不仅仅是理论上生成生物学上正确代码的能力——而是对AI代理能够执行具有实质结果的实验室程序的演示和物理验证。这将基准测试提升到真实的而非仅仅假设性的风险水平。

两用性与对生物安全政策的影响

作者明确将ABC-Bench置于两用（dual-use）框架内：帮助合法研究人员加快实验协议的能力，同时也代表潜在的滥用途径。该基准测试的设计目的不是创造攻击工具——恰恰相反，它旨在为风险评估创建实证基础。

该论文被设想为AI生物安全政策制定者和AI系统评估机构的资源。没有标准化的、实证验证的基准测试，政策就只能基于对模型能力的假设，而非实测数据。以CC BY 4.0许可证发布意味着研究人员、监管机构和AI公司的安全团队可以自由使用和扩展ABC-Bench进行自己的评估。

ABC-Bench作为未来评估标准的基础

ABC-Bench的发布恰逢AI系统的生物安全方面受到监管机构越来越多关注的时刻。该论文提供了一个具体的评估框架，可能成为评估新模型和代理系统的参考点。

如果AI代理能够可靠地在具有滥用潜力的任务上超越专业生物学家，那么仅依赖限制对模型本身访问的政策就不够了。需要动态验证机制、用户意图检测，以及AI公司与生物安全专业机构之间的结构化合作。