跳到正文
热点事件持续更新

TRL 复现 Modal 混合精度 RL 训练方案

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

2026 年 10 月 16 日,AGI Hunt 报道称,TRL 用 Qwen-1.5B 在 AsyncGRPO 中复现了 Modal 的混合精度 RL 训练方案,即 vLLM FP8 采样器搭配 bf16 训练器。复现结果显示,直接使用 GRPO 时训练在约 150 步后发生崩塌,reward 从 0.56 跌到 0.10;单独加入 ratio caps 或 MIS 都未能避免崩塌。改用 score centering 加 MIS 后,reward 达到 0.72,与使用 bf16 采样器的结果持平。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月16日
  1. AGI Hunt
    TRL 复现 Modal 混合精度 RL 训练:GRPO 150 步崩塌,SC+MIS 稳到 0.72

    TRL 用 Qwen-1.5B 在 AsyncGRPO 中复现 Modal 混合精度 RL 方案:vLLM FP8 采样器配 bf16 训练器。GRPO 约 150 步后崩塌,reward 从 0.56 跌到 0.10,单加 ratio caps 或 MIS 都无效。score centering + MIS 后达 0.72,与 bf16 采样器持平。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。