[发明专利]一种图像处理方法及相关设备

说明书

本申请实施例提供了一种图像处理方法及相关设备，用于在音像跟随中获得更清晰的追踪图像帧，包括：接收功能指令，判断是否进行音像跟随；若是则通过硬件虚拟层触发第一图像采集装置以超分辨率采集得到第一采集图像帧；在硬件虚拟层对第一采集图像帧进行裁剪，得到追踪图像帧；通过硬件虚拟层触发显示装置显示追踪图像帧；若否则触发第一图像采集装置以标称分辨率采集得到第二采集图像帧，通过硬件虚拟层触发显示装置显示第二采集图像帧。本申请实施例中，在进行音像跟随时，对分辨率更高的第一采集图像帧进行裁剪得到追踪图像帧，将追踪图像帧放大到与第二采集图像帧相同大小，显示的追踪图像帧清晰度更高。

技术领域

本申请实施例涉及图像领域，具体涉及一种图像处理方法及相关设备。

背景技术

画面声源跟随也被称为音像跟随，是指在直播或者视频录制时，追踪画面中的发言者或其他声源，例如在会议的直播过程中，通过音像跟随使得直播的画面中显示当前的发言者，并在更换了发言人时追踪新的发言者，使得直播的画面显示新的发言者。

现有的画面显示方法为了降低数据处理的冗余，从图像采集装置获取的采集图像帧的分辨率与显示装置的分辨率相同。进行画面声源跟随时，首先在采集图像帧中确定声源位置，然后根据一定比例对采集图像帧进行裁剪得到包括了声源位置的局部得到追踪图像帧，最后放大该追踪图像帧进行显示。例如，显示装置的分辨率为1920*1080，则从图像采集装置获取分辨率为1920*1080的采集图像帧。进行画面声源跟随时，首先在采集图像帧中定位发言者，然后将采集图像帧中分辨率为800*450的局部裁剪得到追踪图像帧，并将分辨率为800*450的追踪图像帧放大到分辨率1920*1080进行显示。

现有画面声源跟随技术，当需要对采集图像帧的局部进行放大时，采取的方式是对当前获取到的采集图像帧做裁剪得到追踪图像帧后放大，存在追踪图像帧放大后较为模糊的缺陷。

发明内容

本申请实施例提供了一种图像处理方法及相关设备，用于在音像跟随中获得更清晰的追踪图像帧。

本申请实施例的第一方面提供了一种图像处理方法，包括：

接收功能指令，根据功能指令判断是否进行音像跟随；

若进行音像跟随，则通过预设的硬件虚拟层触发第一图像采集装置以超分辨率采集得到第一采集图像帧；

在硬件虚拟层对第一采集图像帧进行裁剪，得到追踪图像帧；

通过硬件虚拟层触发显示装置显示追踪图像帧；

若不进行音像跟随，则触发第一图像采集装置以标称分辨率采集得到第二采集图像帧，通过硬件虚拟层触发显示装置显示第二采集图像帧。

基于本申请实施例的第一方面，本申请实施例第一方面的第一种实现方式中，在硬件虚拟层对第一采集图像帧进行裁剪，得到追踪图像帧，具体包括：

确定显示装置用于显示第二采集图像帧的显示区域的显示分辨率；

在硬件虚拟层对第一采集图像帧依据显示分辨率进行裁剪，得到追踪图像帧，使得追踪图像帧的分辨率等于显示分辨率。

本申请实施例中，使得追踪图像帧的分辨率等于显示分辨率，实现对追踪图像帧的无损放大，提高数据的利用率。

基于本申请实施例的第一方面或第一方面的第一种实现方式，本申请实施例第一方面的第二种实现方式中，在硬件虚拟层对第一采集图像帧进行裁剪，得到追踪图像帧，具体包括：

在第一采集图像帧中捕捉人脸图像，在人脸图像中确定唇部开合运动的目标人脸图像；

将包括目标人脸图像的局部裁剪为追踪图像帧。