返回信息流
新闻事件
机器之心
1 个来源

AIBuildAI 开源递归自进化 PostTrain Agent,登顶 PostTrainBench

AIBuildAI 团队发布了 PostTrain Agent,一个用于自主后训练大语言模型的递归自我改进(RSI)Agent,并开源了全部代码与配套知识库。该 Agent 能根据基座模型、目标能力和算力预算,自主设计后训练算法、收集整理数据、编写代码、运行实验并迭代改进,最终交付训练好的模型。在 PostTrainBench 基准上,它以 46.6 分排名第一,超过所有前沿模型与 Agent 系统,接近人类专家表现(51.1)。

SynthePulse Insight · AI 深度解读会员精读

46.6 分背后:AIBuildAI 想证明后训练可以交给 AI,但证据仍来自它自己

版本 1 · 1 个来源

AIBuildAI 开源了自主后训练 Agent,在 PostTrainBench 上以 46.6 分登顶、逼近人类专家基线 51.1。真正值得追问的不是分数,而是这 11.6 分的系统增益能否被独立验证。

  • AIBuildAI 发布并开源 PostTrain Agent,用于自主后训练大语言模型,代码与配套知识库全部开放。
  • 在 PostTrainBench 上加权综合得分 46.6,排名第一,高于所有前沿模型与 Agent 条目,仅次于人类专家基线 51.1。
  • 全部 Agent 角色运行在 Claude Opus 5 上,同样底座的 Claude Code 只有 35.0 分,11.6 分差距被归因于系统而非模型。
展开章节目录一道被设计成“无人可插手”的考题

一道被设计成“无人可插手”的考题

要理解 46.6 分的分量,先要看 PostTrainBench 把问题约束成了什么样子。按来源描述,这个基准(Rank et al., ICML 2026)给定基座模型和目标能力,要求 Agent 在单张 H100 上、10 小时内自主设计并执行后训练方案,全程无人干预;产出的 checkpoint 由基准方持有的、Agent 看不到的评测集打分。

这个设定把“后训练”从一项团队工程压缩成一次封闭考试:用什么数据、怎么配比,选监督微调、偏好优化还是强化学习,超参数和训练框架,全部由 Agent 自己决定。基准覆盖 4 个基座模型和 7 类任务,包括数学推理(AIME 2025、GSM8K)、写作(ArenaHard Writing)、通用问答(GPQA)、健康咨询(HealthBench)、代码(HumanEval)和函数调用(BFCL)。

综合分是七项任务的加权平均:AIME 2025 占 22.7%、GPQA 占 22.5%、HealthBench 占 18.4%、HumanEval 占 10.6%、GSM8K 占 9.4%、ArenaHard Writing 占 9.0%、BFCL 占 7.5%,每项任务取 4 个基座模型的均值。权重分布本身就说明,数学与通用问答几乎决定了总分的一半。

需要区分的是,人类专家基线 51.1 分来自各基座模型官方发布的指令微调版本,并不受 10 小时预算限制。也就是说,Agent 是在更紧的约束下逼近一个不受同等约束的参考值——这一点在解读“接近人类专家”时不应被略过。

分数结构:赢在哪三项,差在哪四项

AIBuildAI 的加权综合得分为 46.6,排名第一,高于所有前沿模型和 Agent 条目,仅次于人类专家基线的 51.1。榜单上紧随其后的是 Locus(45.6)和运行 Claude Fable 5 的 Claude Code(41.8),再往后是 GPT-5.6(36.2)、Claude Opus 5(35.0)、Claude Opus 4.8(33.8)、Kimi K3(32.0)、GLM-5.2(31.7)、Gemini 3.1 Pro(22.0)等。

与榜单上全部 Agent 相比,AIBuildAI 在 AIME 2025(15.8)、BFCL(95.8)和 HumanEval(69.0)三项上取得最高分;在 ArenaHard Writing、GPQA、HealthBench 和 GSM8K 四项上,与各自领先者的差距都在两分以内。

BFCL 的对比最能说明机制差异。该任务按函数调用能否被正确解析、是否符合给定 schema 计分,格式稍有不符即记零分:同样运行 Opus 5 的 Claude Code 平均只有 1.5 分,与未训练的基座模型持平;而 AIBuildAI 在四个基座模型上的得分全部不低于 94、平均 95.8,是七项任务中唯一超过人类参考(85.0)的一项。

AIME 2025 则是另一类信号:AIBuildAI 的 15.8 分之后是 Claude Fable 5 的 13.3 和 Locus 的 9.4。这一项在综合分中权重最大,也是所有 Agent 距人类参考最远的一项。

未经任何训练的基座模型在 PostTrainBench 上平均只有 7.5 分。按来源说法,Agent 在 10 小时内把综合得分提高了约 39 分——这个数字来自团队报告,属于来源主张而非独立确认。

限时免费

继续阅读完整分析

还有 5 节深入分析和完整结论

加载中

可信度边界

本文全部事实来自单一来源:机器之心对 AIBuildAI 技术报告的报道(article_id 20023)。发布行为、PostTrainBench 的设定与覆盖范围、加权权重、46.6 与 51.1 等分数在证据包中标注为 confirmed;榜单竞品分数、逐项领先情况、知识系统与元搜索的细节、案例提升数字均标注为 source_claim,即团队自述或取自公开榜单,未经独立复现。来源本身为微信公众号报道,其引用的技术报告与榜单数据未提供可独立访问的原始记录。

主报道

机器之心

主报道来源