AGI Hunt· paf1138·2026-10-02 22:25· 4 小时前AI 评分47llama.cpp 新增 Decision Models,本地推理迎来新玩法llama.cpp 新增 Decision Models,本地推理迎来新玩法AI 导读llama.cpp 引入 Decision Models 新特性并新增决策模型端点,可在单次前向中直接给出各选项概率。该特性面向模型决策与路由场景,来自 ggml 官方博客,对本地部署和端侧推理用户值得关注。来源:AGI Hunt · agihunt.info#产品更新#开源/仓库#端侧#部署/工程查看事件全部后续