Sep, 2020

视频超分辨率中的可变形对齐理解

TL;DR本研究对变形卷积与经典基于光流的卷积之间的联系进行了探究,发现变形卷积可以分解为空间变形和卷积的组合,具有与基于光流的卷积相似的表达式,但它们在偏移多样性方面有区别。实验证明,增加变形对齐的多样性可以获得更好的结果,同时提出一种偏移保真度损失来指导光流学习的偏移,在提高超分辨率视频质量的同时解决变形对齐的不稳定性问题,并启示了更灵活的引入偏移多样性来提高基于光流的对齐性能的途径。