[发明专利]插帧方法和装置、设备、介质

说明书

本申请公开了一种插帧方法和装置、设备、介质，插帧方法包括：获取连续的两帧视频帧图像；检测两帧视频帧图像是否满足插帧条件；响应于两帧视频帧图像满足插帧条件，预测两帧视频帧图像之间的中间帧；利用中间帧对两帧视频帧图像进行插帧处理。上述方案，能够提高视频插帧的效果。

技术领域

本申请涉及图像处理技术领域，特别是涉及一种插帧方法和装置、设备、介质。

背景技术

目前，大多数的视频包括电影和电视剧等，都是30FPS(每秒传输帧数，Frames PerSecond)及以下的低帧率视频，而目前显示端的屏幕规格已经达到的60FPS，甚至120FPS。表明传统帧率的视频已经跟不上屏幕刷新率的发展。由此，视频插帧技术应运而生，通过预测中间帧的方式进行插帧操作，以便将低帧率的视频转换为高帧率的视频。

现有的视频插帧技术会给所有视频帧之间都进行插帧，但是这么做可能会导致插帧之后的视频所呈现出的效果反而没有插帧前的效果好，即无效插帧较多。

发明内容

本申请至少提供一种插帧方法和装置、设备、介质。

本申请提供了一种插帧方法，包括：获取连续的两帧视频帧图像，其中，两帧视频帧图像用于先后播放；检测两帧视频帧图像是否满足插帧条件；响应于两帧视频帧图像满足插帧条件，预测两帧视频帧图像之间的中间帧；利用中间帧对两帧视频帧图像进行插帧处理。

因此，通过在预测两帧视频帧图像之间的中间帧之前，先检测两帧视频帧图像是否满足插帧条件，使得在两帧视频帧图像满足条件的情况下，再进行中间帧的预测，能够实现对中间帧的筛选，从而提高插帧效果。并且，在两帧视频帧图像满足插帧条件的情况下，才进行中间帧的预测，并非盲目进行中间帧预测之后，再对中间帧进行筛选，能够减少对中间帧预测的资源消耗。

其中，插帧条件包括以下至少一者：两帧视频帧图像的场景状态不为预设状态、两帧视频帧图像中的画面运动类别不处于预设运动类别，其中，预设状态为静止场景状态或场景切换状态；和/或，预设运动类别的运动程度大于预设运动程度。

因此，在两帧视频帧图像的场景状态为静止场景状态或场景切换状态的情况下，继续对两帧视频帧图像的中间帧进行预测并插帧，并不会提高插帧效果，反而会造成资源的浪费，因此，在两帧视频帧图像的场景状态不属于静止场景状态或场景切换状态的情况下，才进行中间帧的预测，能够减少资源浪费。另外，在两帧视频帧图像的画面运动类别处于预设运动类别时，因为运动程度较大，可能会造成中间帧的质量不佳，反而会降低插帧效果，因此，在两帧视频帧图像帧的画面运动程度小于等于预设运动程度的情况下，才进行中间帧的预测，能够提高插帧效果。

其中，在插帧条件包括两帧视频帧图像的场景状态不为预设状态的情况下，检测两帧视频帧图像是否满足插帧条件，包括：利用两帧视频帧图像的视差和/或匹配特征点对的数量，判断两帧视频帧图像的场景状态是否为预设状态；若两帧视频帧图像的场景状态不为预设状态，确定两帧视频帧图像满足插帧条件；在插帧条件包括两帧视频帧图像中的画面运动类别不处于预设运动类别的情况下，检测两帧视频帧图像是否满足插帧条件，包括：基于两帧视频帧图像之间的光流信息，确定两帧视频帧图像的画面运动类别；响应于画面运动类别不属于预设运动类别，确定两帧视频帧图像满足插帧条件。

因此，通过两帧视频帧图像的视差和匹配特征点对的数量，确定两帧视频帧图像的场景状态，能够提高确定的场景状态的准确度。另外，通过两帧视频帧图像之间的光流信息，能够实现确定两帧视频帧图像的画面运动类别。