[发明专利]一种增强感兴趣区域的图像超分方法、系统及介质

权利要求书

1.一种增强感兴趣区域的图像超分方法，其特征在于，所述增强感兴趣区域的图像超分方法包括以下步骤：

获取待超分图像帧及所述待超分图像帧对应的参考图像帧；

基于所述参考图像帧确定所述待超分图像帧中的感兴趣区域对应的第一超分图像；

基于所述参考图像帧确定所述待超分图像帧对应的第二超分图像帧；

基于所述第一超分图像修正所述第二超分图像帧。

2.根据权利要求1所述的增强感兴趣区域的图像超分方法，其特征在于，所述基于所述参考图像帧确定所述待超分图像帧中的感兴趣区域对应的第一超分图像包括：

获取预设的感兴趣对象；

检测所述待超分图像帧中是否存在感兴趣对象；

若所述待超分图像帧存在所述感兴趣对象，则确定所述待超分图像帧中所述感兴趣对象对应的感兴趣区域信息；

获取所述待超分图像帧中该感兴趣区域信息对应的感兴趣图像；

获取经过训练的感兴趣区域超分增强模型；

所述感兴趣图像输入至所述感兴趣区域超分增强模型，通过所述感兴趣区域超分增强模型得到所述待超分图像帧中的感兴趣区域对应的第一超分图像。

3.根据权利要求1所述的增强感兴趣区域的图像超分方法，其特征在于，所述感兴趣区域超分增强模型的训练具体包括：

构建所述感兴趣区域超分增强模型以及构建第一损失函数；

通过所述第一损失函数修正所述感兴趣区域超分增强模型的参数，得到训练好的感兴趣区域超分增强模型。

4.根据权利要求3所述的增强感兴趣区域的图像超分方法，其特征在于，所述第一损失函数采用第一范数作为损失函数，所述第一损失函数的公式表示为：

|O_f-GT_f|₂；

其中，O_f,GT_f分别表示为第一超分图像以及感兴趣图像。

5.根据权利要求1所述的增强感兴趣区域的图像超分方法，其特征在于，所述参考图像帧包括前参考图像帧和后参考图像帧，所述前参考图像帧为所述待超分图像帧相邻的前若干帧，所述后参考图像帧为所述待超分图像帧相邻的后若干帧；所述待超分图像帧作为所述前参考图像帧和所述后参考图像帧的中间帧。

6.根据权利要求5所述的增强感兴趣区域的图像超分方法，其特征在于，所述待超分图像帧与所述参考图像帧为连续视频帧，所述基于所述参考图像帧确定所述待超分图像帧对应的第二超分图像帧具体包括：

获取经过训练的视频超分模型；其中，所述视频超分模型包括多帧对齐模块、多帧融合模块以及特征提取模块；

将若干连续的所述待超分图像帧输入至所述多帧对齐模块，通过所述多帧对齐模块获取每个所述待超分图像帧的前参考图像帧和后参考图像帧；

将所述待超分图像帧、所述待超分图像帧对应的前参考图像帧以及后参考图像帧输入至所述多帧融合模块，通过所述多帧融合模块得到所述待超分图像帧对应的目标图像帧；

所述目标图像帧输入至所述特征提取模块，通过所述特征提取模块得到所述目标图像帧的超分图像帧，并将所述目标图像帧的超分图像帧作为所述待超分图像帧对应的第二超分图像帧。

7.根据权利要求6所述的增强感兴趣区域的图像超分方法，其特征在于，所述视频超分模型的训练具体包括：

构建所述视频超分模型以及构建第二损失函数；

通过所述第二损失函数修正所述视频超分模型的参数，得到训练好的视频超分模型。

8.根据权利要求7所述的增强感兴趣区域的图像超分方法，其特征在于，所述第二损失函数采用第二范数作为损失函数，所述第二损失函数的公式为：

L_sr＝|O_t-Gt_t|₁

其中，L_sr表示所述视频超分模型的第二损失函数，O_t,Gt_t分别为第二超分图像帧以及所述待超分图像帧。