AWS: SageMaker带来NVIDIA Nemotron 3模型的无服务器微调,支持SFT、RLVR和RLAIF技术
Amazon SageMaker AI推出了NVIDIA Nemotron 3模型的无服务器定制化功能,无需管理基础设施。提供三种技术:SFT(监督微调)、RLVR(可验证奖励强化学习)和RLAIF(AI反馈强化学习),使企业团队无需机器学习基础设施知识即可使用先进的强化学习方法。
本文由人工智能基于一手来源生成。
2026年7月10日,AWS在Amazon SageMaker AI中推出了NVIDIA Nemotron 3模型的无服务器定制化功能——无需搭建和维护GPU基础设施即可进行微调。微调是在现有模型基础上用自有数据进行额外训练的过程,使其专注于特定领域任务;无服务器方式消除了最大的障碍——集群管理。
三种技术,三个成熟度层次
该产品包含三种方法。SFT(监督微调)是从标注样本中学习的经典训练方式。RLVR(可验证奖励强化学习)使用客观可验证的奖励——例如生成的代码是否通过测试——近几个月已成为推理型模型背后的关键技术。RLAIF(AI反馈强化学习)用另一个AI模型替代人工评估者,从而大幅降低反馈循环的成本。
RLVR和RLAIF的可用性为何是新闻?
此前,RLVR和RLAIF是拥有自有基础设施和专业团队的研究实验室的专属领域。它们以托管无服务器选项的形式出现,意味着企业团队无需深厚的强化学习知识即可应用这些技术——这是将曾经仅属于前沿实验室的技术民主化。目标模型是NVIDIA Nemotron 3,NVIDIA专门为此类定制化分发的开放模型系列。
实际意义
对于企业而言,这意味着从通用模型到针对自有领域(法律、医疗或工业)的专业助手的路径更短。AWS借此在模型定制化平台竞争中巩固地位,其竞争对手包括Google Vertex AI和Azure AI,提供开放NVIDIA模型与先进强化学习技术合而为一的托管方案。
常见问题
- 无服务器微调意味着什么?
- 在不搭建和管理GPU基础设施的情况下定制模型——AWS自动分配资源,用户只需为实际执行的工作付费。
- 有哪三种可用技术?
- SFT(监督微调)从标记样本中学习;RLVR(可验证奖励强化学习)使用代码正确性等可验证奖励;RLAIF(AI反馈强化学习)用另一个AI模型替代人工评估者。