AGI Hunt· SumitGup·· 2 小时前AI 评分49
Apple 推出 RSI-Inference Bench:AI agent 能否自己优化推理系统
AI 导读
Apple ML Research 发布 RSI-Inference Bench,检验 AI agent 能否改进运行 AI 的系统本身。该 benchmark 基于真实 vLLM 与 SGLang 任务,投入 10 万美元 API token 和 5 万 GPU 小时,最佳 agent pass@1 仅 26.7%,结果未饱和。
来源:AGI Hunt · agihunt.info