arXiv cs.AI· Timothy Kassis·· 4 小时前AI 评分55
Scientific Agents：评估职业专属系统提示词在科学任务上的表现
Scientific Agents: Evaluating Profession-Specific System Prompts on Scientific Tasks
AI 导读
论文评估开源职业系统提示词语料 Scientific Agents（503 个职业 profile），在 Gemini 3.8 Flash 经 OpenRouter 的 Pi agent harness 中，以 9 个文本科学基准、4,531 道题和 100 个匹配 profile 对比四种对照，平均准确率差为 -0.6 个百分点，没有基准出现统计上明确的提升。
来源：arXiv cs.AI · arxiv.org