[发明专利]图像处理方法、装置及存储介质

说明书

本公开涉及一种图像处理方法、装置及存储介质，其中，图像处理方法包括：使用内插法基于第一图像帧以及第二图像帧生成第三图像帧；判断所述第三图像帧是否存在空洞；在所述第三图像帧存在空洞时，使用通过外插法基于所述第一图像帧以及所述第二图像帧得到的、与所述空洞位置相同的第一像素点的像素值对所述空洞进行填充。有效地填补了使用内插法生成的图像帧中出现的空洞，提高了画面质量。

技术领域

本公开涉及图像处理领域，尤其涉及一种图像处理方法、装置及存储介质。

背景技术

目前，互联网上的视频的帧率一般都是每秒24帧、25帧或30帧，该类视频虽然可以满足人眼的视觉暂留及画面流畅播放的要求，但在用户观看一些特殊的视频或用户对观影体验要求较高时，则需要提供较高帧率的视频。为了获取更高帧率的视频，可在拍摄视频时直接拍摄每秒50帧、每秒60帧甚至每秒120帧的视频，但对于已拍摄完成的低帧率的视频来说，则需要借助FRUC(Frame Rate Up Conversion，帧率上转换)算法来提高视频的帧率。使用FRUC处理后的视频画面通常具有一定的缺陷，这类缺陷在连续播放视频时可能并不明显，但在暂停或慢速播放视频时这类缺陷则尤为突出。例如，在本公开的图像处理方法的一个示例性实施例场景中，待处理的图像中包含快速运动的小物体的视频图像，例如，足球比赛视频中的具有快速运动的足球的画面，在视频帧率较低的情况下，使用FRUC对该类视频图像进行处理后，有可能会导致视频画面中出现未被填补的空洞等问题。

发明内容

有鉴于此，本公开提出了一种图像处理方法、装置及存储介质，用以解决图像中存在为空洞的问题。

根据本公开的第一个方面，提供了一种图像处理方法，包括：使用内插法基于第一图像帧以及第二图像帧生成第三图像帧；判断所述第三图像帧是否存在空洞；在所述第三图像帧存在空洞时，使用通过外插法基于所述第一图像帧以及所述第二图像帧得到的、与所述空洞位置相同的第一像素点的像素值对所述空洞进行填充。

可选地，所述第一图像帧以及所述第二图像帧为视频中相邻的两个图像帧，所述方法还包括：在所述第一图像帧以及所述第二图像帧之间插入填充后的第三图像帧。

可选地，判断所述第三图像帧是否存在空洞，包括：在所述第三图像帧中的像素点不具有对应的像素值时，确定所述第三图像帧在该像素点存在空洞；在所述第三图像帧中的像素点具有对应的像素值时，确定所述第三图像帧在该像素点不存在空洞。

可选地，所述方法还包括：在判断所述第三图像帧存在空洞后，使用外插法基于所述第一图像帧以及所述第二图像帧生成第四图像帧，以所述第四图像帧中与所述空洞位置相同的像素点的像素值作为所述第一像素点的像素值。

可选地，判断所述第三图像帧是否存在空洞，包括：依次确定所述第三图像帧中各像素点是否存在空洞。

根据本公开的第二个方面，提供了一种图像处理装置，包括：第一生成模块，用于使用内插法基于第一图像帧以及第二图像帧生成第三图像帧；判断模块，用于判断所述第三图像帧是否存在空洞；填充模块，用于在所述第三图像帧存在空洞时，使用通过外插法基于所述第一图像帧以及所述第二图像帧得到的、与所述空洞位置相同的第一像素点的像素值对所述空洞进行填充。

可选地，所述第一图像帧以及所述第二图像帧为视频中相邻的两个图像帧，所述装置还包括：插入模块，用于在所述第一图像帧以及所述第二图像帧之间插入填充后的第三图像帧。

可选地，所述判断模块，包括：第一确定单元，用于在所述第三图像帧中的像素点不具有对应的像素值时，确定所述第三图像帧在该像素点存在空洞；第二确定单元，用于在所述第三图像帧中的像素点具有对应的像素值时，确定所述第三图像帧在该像素点不存在空洞。

可选地，所述装置还包括：第二生成模块，用于在判断所述第三图像帧存在空洞后，使用外插法基于所述第一图像帧以及所述第二图像帧生成第四图像帧，以所述第四图像帧中与所述空洞位置相同的像素点的像素值作为所述第一像素点的像素值。