[发明专利]一种图像处理方法及装置

说明书

本发明公开了一种图像处理方法及装置，从视频中获取至少一个第一视频帧和第二视频帧，并根据第一视频帧和第二视频帧，确定第二视频帧的至少一个主要对象，进一步基于主要对象，确定基于主要对象对第一视频帧和第二视频帧进行图像增强的增强等级，以根据增强等级对第一视频帧和第二视频帧进行图像增强。由此，完全通过软件算法即可实现对视频图像的增强，可以通过多种方法对软件算法进行实时优化和升级，并且可以根据视频帧中主要对象调整增强等级，例如：对于运动变化较小或者用户注意力较低的对象使用较低级别的增强效果，如此，显著提升图像处理效率，节约计算和存储资源，并有效节约图像处理芯片的功耗。

技术领域

本发明涉及视频处理技术领域，尤其涉及一种图像处理方法及装置。

背景技术

随着图像和视频处理技术的发展，人们对图像的清晰度和流畅性追求越来越高。目前MEMC(运动补偿技术)类图像处理芯片在对Video Stream(视频播放及游戏画面场景)进行图像处理和运动补偿处理的过程中，均使用硬件仿真算法。硬件仿真算法的原理为编码预测，编码预测是数据压缩理论的一个重要分支，可以根据离散信号之间存在一定相关性特点，利用前面的一个或多个信号对下一个信号进行预测，然后对实际值和预测值的差值(预测误差)进行编码。但是编码预测更关注于信号本身，而不是图像中的物体与图像显示内容，如此，处理的效果较差，更容易引入画面问题。同时，使用传统预测编码进行运动补偿的过程中所采用的硬件仿真算法本身由硬件电路实现的，硬件电路升级难度较大且成本较高。例如：图1为使用传统的宏模块预测编码进行运动预测的示例。

发明内容

本发明实施例提供一种图像处理方法及装置。

根据本发明第一方面，提供了一种图像处理方法，所述方法包括：从视频中获取至少一个第一视频帧和第二视频帧，所述第一视频帧是所述第二视频帧的前向帧；根据所述第一视频帧和所述第二视频帧，确定所述第二视频帧的至少一个主要对象；基于所述主要对象，确定基于所述主要对象对所述第一视频帧和所述第二视频帧进行图像增强的增强等级；根据所述增强等级对所述第一视频帧和所述第二视频帧进行图像增强。

根据本发明一实施方式，所述根据所述第一视频帧和所述第二视频帧，确定所述第二视频帧的主要对象，包括：根据所述第一视频帧和所述第二视频帧，确定所述第二视频帧的多个对象的对象运动属性；根据所述对象运动属性是否符合设定运动范围，确定所述第二视频帧的至少一个主要对象。

根据本发明一实施方式，所述根据所述对象运动属性是否符合设定运动范围，确定所述第二视频帧的至少一个主要对象，包括：对象运动属性符合设定运动范围的对象进行边缘检测，得到边缘检测结果；根据所述边缘检测结果确定所述第二视频帧的至少一个主要对象。

根据本发明一实施方式，所述基于所述主要对象，确定基于所述主要对象对所述第一视频帧和所述第二视频帧进行图像增强的增强等级，包括：确定所述主要对象的运动属性；根据所述主要对象的运动属性，确定基于所述主要对象在所述第一视频帧和所述第二视频帧进行图像增强的增强等级。

根据本发明一实施方式，若运动属性包括加速度，所述根据所述主要对象的运动属性，确定基于所述主要对象对所述第一视频帧和所述第二视频帧进行图像增强的增强等级，包括：在所述加速度满足第一加速度条件的情况下，确定基于所述主要对象对所述第一视频帧和所述第二视频帧进行图像增强的增强等级为第一等级；在所述加速度满足第二加速度条件的情况下，确定基于所述主要对象对所述第一视频帧和所述第二视频帧进行图像增强的增强等级为第二等级。

根据本发明一实施方式，所述根据所述增强等级对所述第一视频帧和所述第二视频帧进行图像增强，包括：基于所述主要对象和所述增强等级，确定所述第一视频帧和所述第二视频的中间帧光流数据；根据中间帧光流数据，对所述第一视频帧和所述第二视频帧进行图像增强。