热点事件持续更新
Pleias 谈榜单困境:自建内部基准
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
AGI Hunt 2026年10月13日报道,Pleias 团队 antoine_chaffin 就评测与榜单问题表态。他主张为团队真正关心的用户任务自建内部基准,认为这才是模型工作的九成功力,把评测外包给榜单制定者没有意义。但他同时承认,新手选择模型时仍会看最热门的排行榜,厂商完全无视榜单并非办法。基于这一矛盾,团队称其做法是专注已知对用户重要的能力,不为刷榜牺牲用户体验,并主动向榜单制定方提供反馈与评测数据。报道未提及榜单制定方的回应或此后的进展。
AI 根据报道生成 · 1 小时前更新
最新进展10月13日 15:45
Pleias 团队主张自建内部基准,同时承认新手仍依赖热门排行榜。报道时间线
沿着报道,了解事件的不同侧面。
10月13日
- AGI HuntPleias 团队谈榜单困境:自建内部基准,但无法忽视新手对排行榜的依赖
Pleias 团队 antoine_chaffin 主张为用户真正关心的任务自建内部基准,认为这才是模型工作的九成功力,把评测外包给榜单制定者没有意义。但他也承认新手选模型仍看最热门的排行榜,厂商完全无视榜单并非办法。团队因此专注已知对用户重要的能力、不为刷榜牺牲用户体验,并主动向榜单制定方提供反馈与评测数据。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。