频谱先验降低扩散模型的曝光偏差

扩散模型在迭代采样中通常受误差累积影响，即曝光偏差。研究揭示了训练与推理间存在系统性的频率相关差异，可理解为频率相关信噪比误差。该失配方向随模型和时间步不同而变化，表明固定校正规则无法泛化。团队提出频谱对齐（SPA），一种轻量级、基于引导的方法，将中间预测的功率谱校准至预计算的先验分布。该方法包含两个阶段。