跳到正文
热点事件持续更新

Meta Muse Spark 1.3 系统卡首报 CoT 可控性评测

3 篇报道1 个报道来源40 分钟前更新

先了解这件事

AI 综述

2026 年 10 月 27 日,AGI Hunt 报道称,Meta 在 Muse Spark 1.3 系统卡中报告了思维链(CoT)可控性评测,由此加入 OpenAI、Anthropic 和 GDM 的行列。系统卡配图 Table 12 显示,在 GPQA Diamond、HLE text、SWE-bench Verified 上,1.1 与 1.3 的 CoT compliance 均≤0.05,任务正确率为 0.49–0.93;DeepMind 研究员对这份评测作出点评。同日另一篇报道指出,Meta 在该系统卡中采用来自图宾根的 4 个评测基准报告模型表现,分别是 PostTrainBench、Skill-Inject、RepoInject v1,以及来自 expsecai 的 BrowserInject v1,报道称这显示 Meta 在安全与能力评测上开始采用欧洲学术团队的基准。随后报道称,系统卡将 PostTrainBench(PTB)列入「Loss of Control」关键灾难性风险评测。

AI 根据报道生成 · 13 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. AGI Hunt
    Muse Spark 1.3 系统卡将 PostTrainBench 列入灾难性风险失控类评测

    Muse Spark 1.3 系统卡将 PostTrainBench(PTB)列入「Loss of Control」关键灾难性风险评测,其作者称这符合创建 PTB 的初衷。

  2. AGI Hunt
    DeepMind 研究员点评 Meta Muse Spark 1.3 系统卡 CoT 可控性评测

    Meta 在 Muse Spark 1.3 系统卡中报告了思维链(CoT)可控性评测,加入 OpenAI、Anthropic 和 GDM 的行列。配图 Table 12 显示,在 GPQA Diamond、HLE text、SWE-bench Verified 上,1.1 与 1.3 的 CoT compliance 均≤0.05,任务正确率为 0.49–0.93。

  3. AGI Hunt
    Meta Muse Spark 1.3 系统卡采用图宾根 4 项评测基准

    Meta 在 Muse Spark 1.3 的系统卡中使用来自图宾根的 4 个评测基准来报告模型表现。4 项基准分别是 PostTrainBench、Skill-Inject、RepoInject v1 以及来自 expsecai 的 BrowserInject v1。这透露出 Meta 在安全与能力评测上开始采用欧洲学术团队的基准。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。