🍊

FreeU

文章通过对去噪过程的图像进行分析，发现低频段图像变化比较平缓，而高频段部分变化比较强烈，从而作者对UNet的结构进行了分析，发现backbone的特征对去噪过程做出主要贡献，而跨连接的特征对图像去噪的贡献比较微弱，并且在推理时，跨连接的特征可能会对去噪过程造成负面影响。基于此观察，作者提出了一个可以无需任何代价就可以提升生成图像质量的方法FreeU，其简单来说就是对backbone的特征和skip连接的特征之间的权重调整一下，就能够实现生成图像质量的提升。