AGI Hunt· kastnerkyle·· 2 小时前AI 评分38
Procedural Core:100 万参数小模型帮 8500 万参数 ViT 提升 ImageNet 2.2 个点
Procedural Core:100 万参数小模型帮 8500 万参数 ViT 提升 ImageNet 2.2 个点
AI 导读
Zachary Shinnick 等人发布 Procedural Core:仅 100 万参数、从未见过真实图像的循环小模型在程序化数据上训练,其权重展开为 8500 万参数 ViT 的初始化,使 ImageNet-1k top-1 准确率从 77.6% 提升到 79.8%。
来源:AGI Hunt · agihunt.info