跳到正文
原文
AGI Hunt· tomaarsen·· 3 小时前AI 评分46

Hugging Face 重构 tokenization:加速 Sentence Transformers 推理,静态嵌入受益最大

HF 重构 tokenization 提速 Sentence Transformers,静态嵌入受益最大

AI 导读

Sentence Transformers 维护者 tomaarsen 转发 Simon Brandeis 的 tokenization 重构,可显著加速最常用的 Sentence Transformer 模型推理,静态嵌入模型提速尤其明显。

来源:AGI Hunt · agihunt.info