[发明专利]直播图像矫正方法、装置、设备及存储介质

权利要求书

1.一种直播图像矫正方法，其特征在于，所述方法包括：

获取预设的标准人体轮廓关键点信息及若干直播图像；其中，所述标准人体轮廓关键点信息包括若干活动自由度低于预设阈值的标准人体轮廓关键点；每一所述直播图像包括与若干标准人体轮廓关键点对应的若干人体轮廓关键点；所述人体轮廓关键点包括关键部位的人体轮廓特征点，所述关键部位为人体不经常活动的部位；

基于所述若干直播图像及所述预设的标准人体轮廓关键点信息，训练预设的矫正信息提取模型，其中，所述矫正信息提取模型用于获取直播图像的矫正信息；

获取待矫正的直播图像；其中，所述待矫正的直播图像包括若干人体轮廓关键点；

检测所述待矫正的直播图像的人体所在区域，获取人体所在区域的区域信息；

根据所述人体所在区域的区域信息，截取所述直播图像中人体所在区域的图像，将所述人体所在区域的图像输入训练后的矫正信息提取模型，获取所述待矫正的直播图像的矫正信息；

根据所述矫正信息对所述待矫正的直播图像进行仿射变换处理，获取矫正后的直播图像。

2.根据权利要求1所述的直播图像矫正方法，其特征在于，截取所述直播图像中人体所在区域的图像的步骤包括：

根据所述区域信息，获取人体所在区域的中心点的位置信息；

按照所述中心点的位置信息及预设的图像尺寸，获取所述直播图像中待截取图像的位置信息；

根据待截取图像的位置信息，截取所述直播图像中人体所在区域的图像。

3.根据权利要求1所述的直播图像矫正方法，其特征在于，所述矫正信息包括角度参数、位置参数及尺度参数，利用所述矫正信息对所述直播图像进行仿射变换处理的步骤包括：

基于所述角度参数对所述直播图像进行旋转处理，基于所述位置参数对对所述直播图像进行平移处理，基于所述尺度参数对对所述直播图像进行缩放处理，得到矫正后的直播图像。

4.根据权利要求1所述的直播图像矫正方法，其特征在于，基于所述若干直播图像及所述预设的标准人体轮廓关键点信息，训练预设的矫正信息提取模型的步骤包括：

将所述若干直播图像输入所述预设的矫正信息提取模型，获取所述若干直播图像的矫正信息；

根据所述矫正信息对所述若干直播图像进行仿射变换处理，获取矫正后的直播图像的人体轮廓关键点的预测位置信息；

按照以下方式获取矫正信息提取模型的损失值：

loss＝(y_im-y_t)²

其中，loss表示损失值，y_im表示矫正后的直播图像的人体轮廓关键点的预测位置信息，y_t表示标准人体轮廓关键点的位置信息；

调整所述矫正信息提取模型的模型参数，直至所述矫正信息提取模型的损失值小于预设损失阈值。

5.根据权利要求1-4任一项所述的直播图像矫正方法，其特征在于，所述矫正信息提取模型包括：若干个卷积层、池化层和全连接层；

所述若干个卷积层用于对所述直播图像进行卷积处理，下采样至第一预设分辨率并输出特征图至池化层；

所述池化层用于对所述若干个卷积层输出的特征图进行池化处理，下采样至第二预设分辨率并输出至全连接层；

所述全连接层用于根据所述池化层输出的第二预设分辨率的特征图进行全连接处理，得到直播图像的矫正信息。

6.根据权利要求4所述的直播图像矫正方法，其特征在于，基于所述若干直播图像及所述预设的标准人体轮廓关键点信息，训练预设的矫正信息提取模型的步骤包括：

基于随机梯度下降算法，以所述若干直播图像及所述预设的标准人体轮廓关键点信息训练预设的矫正信息提取模型，调整所述矫正信息提取模型的模型参数。