跳到正文
原文
AGI Hunt· Sufficient_Flower860·· 4 小时前AI 评分39

6 个 LLM PK 97 格标注数据:漏提取的锅在 ASR 不在模型

6 个 LLM PK 97 格标注数据:漏提取的锅在 ASR 不在模型

AI 导读

6 个视频、97 格人工标注的横测显示,LLM 漏提取的瓶颈在 ASR 分段切断而非模型能力。本地 CLI + Google One Pro 下 gemini-3.7 与 3.8 均达 91/97 = 93.8%,逐视频分数和错误完全一致,但 3.8 慢 5-6 倍。3.6、3.7-medium、3.7-high 在同一视频都漏掉同样 4 格,DeepSeek V4 Flash 仅 71/97。

来源:AGI Hunt · agihunt.info