跳到正文
原文
AGI Hunt· huggingface·· 2 小时前精选AI 评分66

Hugging Face transformers serve 新增 /v1/systemone 端点,250 个 LLM/VLM 免生成直接做决策

transformers serve 新端点:250 个 LLM/VLM 秒变决策模型

AI 导读

Hugging Face transformers serve 新增 /v1/systemone 端点,250 个 LLM/VLM 无需训练分类头、奖励头或价值头即可作为无生成的决策模型。

推荐理由

相比加头再单独训练,这一端点让现有开源基座模型零改造承担路由与打分等决策,可据此衡量部署成本。

来源:AGI Hunt · agihunt.info