Google Research·· 2026-07-16AI 评分31
Google Research 揭示扩散模型创造力来源:score smoothing 机制解析
Towards demystifying the creativity of diffusion models
AI 导读
Google Research 在 ICLR 2026 论文中揭示扩散模型的创造力源于神经网络训练中的 score smoothing 效应:权重衰减等正则化使模型学到平滑的 score function,让去噪过程在训练数据点之间插值,从而生成新样本而非简单记忆。研究通过一维实验验证,权重衰减越强,插值区域越明显,即使无显式正则化,梯度训练的隐式正则化也能产生类似效果。
来源:Google Research · research.google