Meta Muse Spark 1.3 系统卡首报 CoT 可控性评测
先了解这件事
2026 年 10 月 27 日,AGI Hunt 报道称,Meta 在 Muse Spark 1.3 系统卡中报告了思维链(CoT)可控性评测,由此加入 OpenAI、Anthropic 和 GDM 的行列。系统卡配图 Table 12 显示,在 GPQA Diamond、HLE text、SWE-bench Verified 上,1.1 与 1.3 的 CoT compliance 均≤0.05,任务正确率为 0.49–0.93;DeepMind 研究员对这份评测作出点评。同日另一篇报道指出,Meta 在该系统卡中采用来自图宾根的 4 个评测基准报告模型表现,分别是 PostTrainBench、Skill-Inject、RepoInject v1,以及来自 expsecai 的 BrowserInject v1,报道称这显示 Meta 在安全与能力评测上开始采用欧洲学术团队的基准。随后报道称,系统卡将 PostTrainBench(PTB)列入「Loss of Control」关键灾难性风险评测。
AI 根据报道生成 · 13 分钟前更新
报道时间线
沿着报道,了解事件的不同侧面。
- AGI HuntMuse Spark 1.3 系统卡将 PostTrainBench 列入灾难性风险失控类评测
Muse Spark 1.3 系统卡将 PostTrainBench(PTB)列入「Loss of Control」关键灾难性风险评测,其作者称这符合创建 PTB 的初衷。
- AGI HuntDeepMind 研究员点评 Meta Muse Spark 1.3 系统卡 CoT 可控性评测
Meta 在 Muse Spark 1.3 系统卡中报告了思维链(CoT)可控性评测,加入 OpenAI、Anthropic 和 GDM 的行列。配图 Table 12 显示,在 GPQA Diamond、HLE text、SWE-bench Verified 上,1.1 与 1.3 的 CoT compliance 均≤0.05,任务正确率为 0.49–0.93。
- AGI HuntMeta Muse Spark 1.3 系统卡采用图宾根 4 项评测基准
Meta 在 Muse Spark 1.3 的系统卡中使用来自图宾根的 4 个评测基准来报告模型表现。4 项基准分别是 PostTrainBench、Skill-Inject、RepoInject v1 以及来自 expsecai 的 BrowserInject v1。这透露出 Meta 在安全与能力评测上开始采用欧洲学术团队的基准。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。