工具 #开源模型#智能体 2026-10-23 · 原文发布 10-22

SageMaker AI 训练会话正式可用:自己写后训练循环和奖励函数,GPU 由 AWS 管,按处理的 token 计费

给开源权重模型做强化学习的门槛又低了一截。这一条讲你写什么、AWS 管什么、怎么收费。

一手来源 AWS 机器学习博客 · aws.amazon.com 读原文 ↗

// 要点

  • 训练会话是 SageMaker AI 无服务器模型定制的扩展:训练循环、自定义损失和奖励信号由你写,GPU 分配、分布式执行、故障恢复和检查点存储由 SageMaker AI 负责。
  • 支持 SFT、DPO、RLVR、RLAIF 和多轮强化学习,可以选 LoRA 或全量微调;奖励函数在你自己的环境里运行,并在那里把智能体接到它的工具或模拟器上。
  • 按 SageMaker AI 处理的 token 计费,奖励函数在你那边给一批结果打分时不计费,也不需要预留容量。
  • 配套的 cookbook 提供模型定制的智能体技能,可在 SageMaker Studio、Kiro、Claude Code、Codex 和 GitHub Copilot 里使用。

开发者视角「打分时不计费」这一点对多轮智能体训练很关键,评测环境慢也不白花 GPU 钱。我会先拿下一条 ThinkingBox 那种「检查最终状态」的奖励,在一个小开源模型上跑几十步看曲线,再决定值不值得为某个固定任务养一个专用模型。

// 来龙去脉 · 来自 #开源模型 专题

看完整时间线 →
  1. 10-22 NVIDIA 开放 Kumo Relational:不训练、直接在关系数据库上预测流失与欺诈,在 15 个数据库的 41 项任务上胜过有监督方案
  2. 10-22 IBM 以 Apache 2.0 发布 Granite Speech 5.0 2B:英文平均 WER 5.06%,关键词偏置最多 2,000 个词
  3. 10-22 Dharma AI 按 token 成本重做微调后 Qwen3-4B 的词表,线上作文评分模型的实测推理成本降低 77%