跳到正文
热点事件持续更新

Pleias 谈榜单困境:自建内部基准

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

AGI Hunt 2026年10月13日报道,Pleias 团队 antoine_chaffin 就评测与榜单问题表态。他主张为团队真正关心的用户任务自建内部基准,认为这才是模型工作的九成功力,把评测外包给榜单制定者没有意义。但他同时承认,新手选择模型时仍会看最热门的排行榜,厂商完全无视榜单并非办法。基于这一矛盾,团队称其做法是专注已知对用户重要的能力,不为刷榜牺牲用户体验,并主动向榜单制定方提供反馈与评测数据。报道未提及榜单制定方的回应或此后的进展。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月13日
  1. AGI Hunt
    Pleias 团队谈榜单困境:自建内部基准,但无法忽视新手对排行榜的依赖

    Pleias 团队 antoine_chaffin 主张为用户真正关心的任务自建内部基准,认为这才是模型工作的九成功力,把评测外包给榜单制定者没有意义。但他也承认新手选模型仍看最热门的排行榜,厂商完全无视榜单并非办法。团队因此专注已知对用户重要的能力、不为刷榜牺牲用户体验,并主动向榜单制定方提供反馈与评测数据。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。