[发明专利]一种多个注意力结合光流的视频超分辨模型及方法

摘要

本发明提供的一种多个注意力结合光流的视频超分辨模型及方法，属于模式识别与计算机视觉技术领域。本发明的模型包括特征提取部分、特征处理部分、可变形卷积部分和视频重建部分。本发明的方法利用双阶段思想分别对微小运动和大型运动进行特征对齐，分别处理微小运动和大型运动的信息，减小了目标帧和参考帧的偏差，充分利用了所有分层的特征信息，利用多个注意力使得视频空间信息不易丢失，保留了空间信息，增强通道的依赖性和自适应性，并能捕获长距离依赖实现全局学习。并利用可变形卷积长短时记忆网络(DLSTM)进行视频帧融合，防止了恢复的视频出现抖动和闪烁伪影等现象，保证视频时序的一致性。