用户从零后训练 Yandex AliceAI-80B 并将开源

2026 年 10 月，Reddit 用户 jjusko20 在 Yandex 开源的 AliceAI-80B-A3B 基座模型上，从零开展 instruct 后训练。其方法是使用自建的合成蒸馏数据集进行监督微调（SFT），训练过程中平均 loss 随 epoch 稳步下降；对于训练曲线上出现的异常，作者解释为词表大小与各 epoch token 数量差异所致。据该报道，训练已接近完成，作者表示将开源 GGUF 格式模型与训练内核。目前关于具体数据集规模、训练硬件与开源时间点，报道中未提及。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。