[发明专利]一种视频帧融合方法、装置、电子设备

权利要求书

1.一种视频帧融合方法，其特征在于，所述方法包括：

获取待融合视频中的包括目标物体的第一视频帧和第二视频帧，所述第一视频帧为待融合的视频帧，所述第二视频帧与所述第一视频帧相差帧数不超过预设帧数；

基于所述第一视频帧和所述第二视频帧，确定所述目标物体的移动速度；

根据所述移动速度，以及预设的移动速度与融合帧数的对应关系，确定与所述第一视频帧进行融合的视频帧的融合帧数；

确定与所述第一视频帧相邻的所述融合帧数个第三视频帧；

对所述第一视频帧和所述融合帧数个第三视频帧进行视频帧融合，得到融合后的第一视频帧。

2.根据权利要求1所述的方法，其特征在于，所述基于所述第一视频帧和所述第二视频帧，确定所述目标物体的移动速度的步骤，包括：

将所述第一视频帧和所述第二视频帧输入预先训练的位移神经网络，得到所述目标物体在所述第一视频帧中所处位置与所述目标物体在所述第二视频帧中所处位置的位置偏移值；其中，所述位移神经网络是根据样本数据训练得到的，所述样本数据包括：多组视频帧，以及每组视频帧对应的位置偏移值；

根据所述位置偏移值，以及所述第一视频帧与所述第二视频帧相差的帧数，确定所述目标物体的移动速度。

3.根据权利要求1所述的方法，其特征在于，所述根据所述移动速度，以及预设的移动速度与融合帧数的对应关系，确定与所述第一视频帧进行融合的视频帧的融合帧数的步骤，包括：

按照如下公式确定所述融合帧数：

其中，k为所述融合帧数，v为所述移动速度，v₀为预设的移动速度阈值，k₁为预设的第一融合帧数，k₂为预设的第二融合帧数，k₁k₂。

4.根据权利要求1所述的方法，其特征在于，所述第三视频帧包括前序视频帧和后序视频帧，所述前序视频帧为位于所述第一视频帧之前的与所述第一视频帧相邻的视频帧，所述后序视频帧为位于所述第一视频帧之后的与所述第一视频帧相邻的视频帧，所述前序视频帧的数目和所述后序视频帧的数目相差不超过预设阈值。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：

对所述融合后的第一视频帧进行目标检测。

6.一种视频帧融合装置，其特征在于，所述装置包括：

获取模块，用于获取待融合视频中的包括目标物体的第一视频帧和第二视频帧，所述第一视频帧为待融合的视频帧，所述第二视频帧与所述第一视频帧相差帧数不超过预设帧数；

第一确定模块，用于基于所述第一视频帧和所述第二视频帧，确定所述目标物体的移动速度；

第二确定模块，用于根据所述移动速度，以及预设的移动速度与融合帧数的对应关系，确定与所述第一视频帧进行融合的视频帧的融合帧数；

第三确定模块，用于确定与所述第一视频帧相邻的所述融合帧数个第三视频帧；

融合模块，用于对所述第一视频帧和所述融合帧数个第三视频帧进行视频帧融合，得到融合后的第一视频帧。

7.根据权利要求6所述的装置，其特征在于，所述第一确定模块，具体用于：

将所述第一视频帧和所述第二视频帧输入预先训练的位移神经网络，得到所述目标物体在所述第一视频帧中所处位置与所述目标物体在所述第二视频帧中所处位置的位置偏移值；其中，所述位移神经网络是根据样本数据训练得到的，所述样本数据包括：多组视频帧，以及每组视频帧对应的相对位置偏移值；

根据所述位置偏移值以及所述第一视频帧与所述第二视频帧相差的帧数，确定所述目标物体的移动速度。