AI自动研究：路线图与前沿LLM的边界

来自NUS和NTU的研究人员在arXiv论文2605.18661中分析了仅需15美元即可自主生成研究论文的系统。核心发现：前沿LLM会捏造结果，且无法可靠评估想法的新颖性。全面路线图划定了可靠辅助与不安全AI自主之间的边界。

来自新加坡国立大学（NUS）和南洋理工大学（NTU）的研究人员发布了关于自动研究系统现状的全面综述——这些AI平台无需持续人工监督即可生成完整研究论文。arXiv:2605.18661拥有20位共同作者，提供了路线图、基准测试套件、工具清单和实用应用指南。

什么是自动研究，今天的成本是多少？

自动研究指的是一类AI代理，能够自主完成整个研究周期：生成想法、检索文献、编写和执行实验代码、可视化结果以及撰写手稿。作者强调，此类系统已达到整个周期只需仅需15美元即可完成的水平——这使访问更加民主化，但也带来了严重的完整性问题。

路线图将研究生命周期分为四个阶段：创作（构思、文献综述、编码、实验）、撰写手稿、验证（同行评审、答复审稿意见）和传播（海报、演讲、社交媒体）。

研究的关键发现很明确：**前沿LLM——最先进的可用语言模型——仍然会捏造结果、遗漏隐藏错误，且无法可靠评估新颖性。**研究划定了AI提供可靠辅助的阶段与自主性变得危险的阶段之间的清晰边界。想法生成在实施后会退化，研究代码通常表现低于基准，自主系统在顶级会议上尚未持续获得录用。

具体而言：当模型无法在训练数据中找到足够的数据时，可能生成令人信服但虚构的数值或书目引用——即所谓的捏造——在学术背景下尤为危险，因为它会在表面检查中不被发现。

研究得出结论，人类主导的协作——AI承担结构化、工具介导的任务，而人类对关键科学判断保持监督——是自动研究最可靠的范式。AI代理在文献检索和已知问题代码生成等任务上表现出高可靠性，但对于知识边界的独创性评估和创造性推理仍不可靠。

除路线图外，作者还将基准测试套件和工具清单作为开放资源发布给研究社区，为进一步研究AI自主性边界奠定了方法论框架。

常见问题

什么是自动研究，15美元生成论文意味着什么？

自动研究是指在没有或极少人工监督的情况下完全自动化地生成研究论文——从想法到手稿。基于前沿LLM的系统如今只需15美元即可完成整个周期，但结果的可靠性和完整性仍存疑问。

为什么前沿LLM在研究背景下会捏造结果？

前沿LLM针对文本连贯性而非新实验的事实准确性进行了优化。当模型在训练数据中找不到足够的数据时，可能生成令人信服但虚构的数值或引用——即所谓的幻觉——在无法立即验证每项数据的学术背景下尤为危险。

推荐的人机协作模式是什么？

作者得出结论，人类主导的协作——AI提供辅助而人类对关键决策保持监督的模式——是最可靠的范式。AI在结构化、工具介导的任务上表现强劲，但在评估新颖性和创造性推理方面还不够可靠。