扩散模型纠错训练:无需CFG也能提升生成质量

alphaXiv 上公开的一篇论文提出“纠错训练”方法,用一个小型纠错器修正扩散模型自身预测的累积误差,在无引导生成时显著改善 FID,效果接近 CFG,且推理成本可通过蒸馏摊销。

一句话看懂:alphaXiv 上公开的一篇论文提出“纠错训练”方法,用一个小型纠错器修正扩散模型自身预测的累积误差,在无引导生成时显著改善 FID,效果接近 CFG,且推理成本可通过蒸馏摊销。

事件核心:发生了什么

2026 年 10 月 13 日,alphaXiv 公开了一篇题为《Correction Training for Diffusion Models》的论文。作者指出,扩散模型推理时的迭代采样存在曝光偏差:去噪器在训练时看到的是真实图像加噪,但推理时输入来自自己前几步的不完美预测,这种训练与推理的差距可能导致误差累积,也是模型常需依赖 CFG 的原因之一。

为此,论文引入一个纠错步骤:纠错器以基础模型自身的预测为输入,并针对与基础模型相同的地面真值目标进行训练。采样时,每个去噪步骤都会迭代细化去噪器的干净样本预测,从而在中间步骤纠正预测,防止早期伪影保留到最终结果。作者在 DiT、SiT、JiT 等架构上评估,称方法显著改善了无引导生成和无条件生成的 FID,性能与 CFG 具有竞争力,且与 CFG 结合可进一步改善多样性和缓解过饱和。纠错带来的额外推理成本,可通过将细化预测蒸馏回基础模型来摊销,从而在不增加推理开销的情况下保留质量增益。

为什么重要

扩散模型在图像生成中通常依赖 CFG 来提升质量,但 CFG 会带来过饱和、多样性下降和额外推理开销。这项研究尝试把“纠正自身错误”变为显式学习任务,让生成质量提升不完全依赖外部引导,为扩散模型训练与推理的一致性提供了新思路。如果方法能稳定复现,可能减少对 CFG 的依赖,并在不牺牲多样性的情况下改善生成结果。

对用户/开发者/创作者的影响

对开发者而言,该方法提供了一种可叠加在现有扩散架构上的纠错训练流程,且蒸馏后不增加推理成本,有可能集成到现有图像生成管线中。对创作者来说,未来工具可能在无额外推理开销的情况下生成更干净、更少饱和伪影的图像。不过目前公开信息显示,这是论文阶段的方案,尚未公布产品化或 API 计划,实际可用性取决于后续代码和复现结果。

GamsGo AI

AI 工具推荐

想把多个 AI 模型放在一个入口?

GamsGo AI 集成 ChatGPT、DeepSeek、Gemini、Claude、Midjourney、Veo 等常用模型,适合写作、绘图、视频和日常 AI 工作流。

了解 GamsGo AI

推广链接:通过此链接购买,我可能获得佣金,不影响你的价格。

值得关注的后续

作者已在评论区公布项目页和代码仓库,可观察代码是否完整、能否在主流模型上复现;纠错器在更高分辨率和视频生成任务上是否同样有效;以及蒸馏回基础模型后,质量增益是否在长期迭代中保持稳定。这些将决定该方法能否被社区广泛采用。

来源:alphaXiv

celebrityanime
celebrityanime
文章: 28980

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注