arXiv:2606.14350 — 复合 AI 系统的8种设计模式：成本最高降低71%

单体模型在灵活性上的局限

在设计阶段选定的单一大型语言模型，既无法根据输入任务的复杂程度轻松调整行为，也无法将工作分配给专业化组件。这是维也纳工业大学（TU Wien）研究人员 Miloš Gravara、Andrija Stanisić 和 Stefan Nastić 的出发点——他们提出了一套系统性方法论，用于设计通过显式控制逻辑编排多个模型、算法和工具的复合 AI 系统。

这一论点不仅停留在理论层面。随着生产 AI 系统复杂度的提升，在没有正式框架的情况下随意堆砌组件，会导致次优配置，以及延迟、准确率和成本之间难以预测的权衡。

复合系统与单体模型的实际性能差距有多大？

三个实证案例研究给出了具体答案。复合配置实现了与单体模型相差 2.5至4个百分点 的准确率——同时实现了延迟最高降低60% 和成本最高降低71%。这些权衡在不同任务类型中保持一致，这使复合方法在几乎所有以最高准确率并非唯一选择标准的生产场景中都具有经济吸引力。

两个自由度，八种模式

方法论沿两个自由度组织设计空间：工作流拓扑（workflow topology）和配置选择（configuration selection）。通过组合这两个维度，作者识别出8种设计模式，分别针对单模型方法的特定不足。

模式包括：各组件顺序通过并各自优化于子任务的链式配置；根据估计的复杂度或输入类型动态重定向任务的路由器（routers）；将并行执行与多模型输出的后续评估或投票相结合的集成与批评者（ensembles and critics）。每种模式均附有明确记录的权衡，支持系统性的架构选择，而非凭直觉猜测。

核心张力：模型与配置须共同选择

作者强调，模型选择与配置参数的共同选择决定了系统性能。这一洞察听起来显而易见，但有着严肃的工程含义：随着组件数量增加，可能配置的空间以组合方式增长，使手动调优在具有高 SLO 合规要求的生产条件下愈发不切实际。

正是这种组合式膨胀催生了形式化方法论的需求。若缺乏结构化的搜索空间，工程师只能依赖经验和临时实验，所得配置可能勉强有效，却远非在给定约束条件下的最优解。

五项开放挑战

论文以识别出五项引领未来研究方向的开放挑战作结。最具难度的是自动发现满足服务级别目标（SLO）的配置——能够在无需人工干预的情况下，自主找到满足延迟、成本和准确率要求的组件、参数与拓扑组合。

其余挑战包括：运行时适配管理（在执行过程中根据输入难度的变化动态调整配置）、不同复合架构的标准化评估，以及分布式环境中的形式化 SLO 合规保证。这些开放问题勾勒出当前启发式方案与系统性 AI 基础设施工程之间的边界。

为何此时尤为重要

「复合 AI」范式——链式结构、路由器、集成、批评者——正迅速成为生产 AI 系统的主流架构。LangChain、DSPy 或 LlamaIndex 等工具已实现了其中许多模式，但缺乏确保可预测权衡的正式设计与评估框架。

Gravara 等人的研究向系统性复合 AI 工程迈出了重要一步——以可测量、可复现的权衡取代猜测。对于当下正在单体与复合方法之间作出选择的生产团队而言，这8种模式和三项具体测量结果提供了难得的实证依据。