Gary Marcus：模型与harness是协同设计系统

2026年10月12日，Gary Marcus 转发一则观点，提出模型与 harness 并非「引擎+可拆卸外壳」的关系，而是协同设计的整体系统。该观点以 SWE-bench 为例指出，同一个模型换用不同 harness 时，得分会大不相同，因此把评测成绩单纯归因于模型本身并不准确。这一说法把讨论焦点从模型权重转向模型与外部工具、脚手架的组合方式。报道未给出具体的 harness 名称、对比分数或实验细节，也未提及涉及的模型与基准版本。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。