[发明专利]一种基于循环交互的立体图像超分辨率重建方法

权利要求书

1.一种基于循环交互的立体图像超分辨率重建方法，其特征在于，所述方法包括以下步骤：

通过队列重组转换将左右视点的多层特征重组为左右序列，重组排列遵循特征从浅层到深层的顺序；

构建循环交互模块，以循环结构交互增强左右视点多层特征，所述循环交互模块由循环交互单元组成，所述循环交互单元由2个交互单元和跳连接组成；

通过多次传播策略，循环交互输入序列中的左右视点多层特征，学习视点间依赖性以增强特征，进而获取最终的循环交互增强特征；

基于循环交互增强特征，使用子像素卷积提高特征分辨率，使用n×n卷积将特征重建为高分辨率左右视图；

使用相关性损失函数、差异损失函数和L1损失函数构建多损失函数机制，提升立体图像的超分辨率重建质量；

所述循环交互单元用于学习当前输入与之前的输入间的视点间依赖性，即：

在每个时间步，将传播的隐藏层状态与当前输入的特征进行交互，以获得增强的隐藏层状态和增强的当前特征；

将增强的隐藏层状态传播至下一时间步进行下一次交互增强，增强的当前特征保留以用作第n+1次传播；

在遍历序列S_(n)中的所有特征后，最后一个隐藏层状态即为此次传播的增强特征F_(n)，将增强特征F_(n)作为序列S_(n+1)的第一个特征，进行第n+1次传播。

2.根据权利要求1所述的一种基于循环交互的立体图像超分辨率重建方法，其特征在于，所述通过队列重组转换将左右视点的多层特征重组为左右序列具体为：

在队列重组转换过程中，左右序列由不同层级的左右视点特征交替排列组成，且重组排列遵循特征从浅层到深层的顺序。

3.根据权利要求1所述的一种基于循环交互的立体图像超分辨率重建方法，其特征在于，所述多次传播策略为：

利用多次传播策略获得的第n+1个左序列表达如下：

S₍₁₎＝S_l

S_(n+1)＝RI_(n)(...RI₍₂₎(RI₍₁₎(S₍₁₎))...)

其中，S_(n+1)代表第n次传播RI_(n)(.)输出的增强序列，RI_(n)表示第n次循环交互；右序列的传播策略相同。

4.根据权利要求3所述的一种基于循环交互的立体图像超分辨率重建方法，其特征在于，所述第n次传播的循环过程表达如下：

其中，代表第n次传播的第i时间步输出的隐藏层状态，代表序列S_(n)在第n次传播的第i时间步的输入特征，InU_H和InU_S分别代表用于增强隐藏层状态的交互单元和用于增强当前特征的交互单元，和由跳连接实现。