HF Datasets 5.1 发布：新增多种数据格式

2026 年 10 月 5 日，AGI Hunt 报道 Hugging Face Datasets 5.1 的更新。早先报道称这是 5.1 的补充更新，为流式（streaming/iterable）数据集带来新功能，并修复了在 shuffle 流式数据集时分片数量（number of shards）不正确的 bug，该修复由 @yuchenwang03 贡献；对依赖流式加载大规模数据的用户来说是一处实用修复。后续报道则将这一版本称为 Datasets 5.1 正式发布，称其除上述流式相关更新外，还新增 Vortex 支持与五种生物分子数据格式，覆盖更多数据类型，提升流式数据处理体验。两篇报道均未说明新增流式功能的具体内容、受影响版本范围，也未给出 Vortex 与生物分子格式的细节。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。