AGI Hunt· ostrisai·· 2 小时前AI 评分31
ostris 预训练「Primal VAE」:仅 2x 下采样、1 通道的激进新方案
ostris 预训练「Primal VAE」:仅 2x 下采样 1 通道的激进新方案
AI 导读
AI 研究者 ostris 正在预训练新概念 VAE「Primal VAE」,只做 2 倍空间下采样到 1 通道。若对 latent 做 patch 4,等效于 8 倍压缩下 16 通道,与现代主流 VAE 相同,却无需深度压缩。预训练目前只用 LPIPS 和 MAE、即将加入 critic,并借用 EQVAE 的 latent 翻转与旋转技巧让潜空间更易做扩散。
来源:AGI Hunt · agihunt.info