🍊

Enhance-A-Video

这篇文章中，作者发现在时域的self-attention map中，对角线的权重比其他区域要大，因此作者就提出，在某层的前向过程中，利用attention map评估帧间的权重占比，通过该占比，调整该层的输出与残差的比例（作者通过实验发现某层的输出和残差的比例中，残差占大部分），增加帧间权重大的层的输出比重（通过温度系数调节）。