[发明专利]一种增强现实的方法、装置及系统

说明书

本发明涉及增强现实技术领域，涉及一种增强现实的方法、装置及系统，包括：接收第一账户登录的第一终端发送的对应第二账户的第一增强现实请求；接收第二账户登录的第二终端发送的对应第一账户的第二增强现实请求；基于第一面部图像集合、第二面部图像集合和增强现实参数集，进行模型训练，得到训练后的第一增强现实模型和训练后的第二增强现实模型；增强现实参数集包括多个维度的参数，参数包括：肤色调整参数、表情调整参数、脸型调整参数、角度调整参数和装饰调整参数；向第一终端发送所述训练后的第一增强现实模型，向第二终端发送所述训练后的第二增强现实模型。本发明能减小图像失真，能在训练过程中能够对面部图像进行调整。

技术领域

本发明涉及增强现实技术领域，具体地说，涉及一种增强现实的方法、装置及系统。

背景技术

随着网络技术的飞速发展，网络视频得到了广泛的推广和使用，视频可以是直播视频或录播视频。在录制视频的过程中，很多主播开始尝试一些新的互动方式，例如对视频进行更换面部图像，也即，将视频中自己的面部图像换成其他人的面部图像，然后上传服务器进行播放。

相关技术中的方案是，利用图像识别技术在视频图像中识别面部图像，然后使用目标人物的面部图像，替换视频图像中的面部图像，然后将视频图像上传服务器。

上述相关技术中对视频图像进行面部图像处理的过程中，在视频图像中进行局部图像替换，很可能出现目标人物的面部图像与原人物的面部图像形状不匹配的情况，需要对目标人物的面部图像进行变形处理，这样会导致图像存在失真，而且面部图像未做调整，导致效果较差。

发明内容

本发明的内容是提供一种增强现实的方法、装置及系统，其能够克服现有技术的某种或某些缺陷。

根据本发明的一种增强现实的方法，其包括：

接收第一账户登录的第一终端发送的对应第二账户的第一增强现实请求，第一增强现实请求中携带第一人物的第一面部图像集合；

接收第二账户登录的第二终端发送的对应第一账户的第二增强现实请求，第二增强现实请求中携带第二人物的第二面部图像集合；

基于第一面部图像集合、第二面部图像集合和增强现实参数集，进行模型训练，得到训练后的第一增强现实模型和训练后的第二增强现实模型；其中，训练后的第一增强现实模型用于调整后将第一人物的面部图像更换为第二人物的面部图像，训练后的第二增强现实模型用于调整后将第二人物的面部图像更换为第一人物的面部图像；

增强现实参数集包括多个维度的参数，参数包括：肤色调整参数、表情调整参数、脸型调整参数、角度调整参数和装饰调整参数；

向第一终端发送所述训练后的第一增强现实模型，向第二终端发送所述训练后的第二增强现实模型。

作为优选，基于第一面部图像集合、第二面部图像集合和增强现实参数集，进行模型训练，得到训练后的第一增强现实模型和训练后的第二增强现实模型，包括：

交替获取第一人物的面部图像集合和第二人物的面部图像集合中的面部图像；

每获取一个第一人物的面部图像，对第一人物的面部图像进行扭曲，得到扭曲后的第一人物的面部图像，将扭曲后的第一人物的面部图像输入特征提取模型，得到第一特征图像，将第一特征图像输入第二还原模型，得到第一输出图像，通过增强现实参数集对第一输出图像进行调整，基于当前获取的第一人物的面部图像和调整后的第一输出图像，对特征提取模型和第二还原模型，进行参数更新；

每获取一个第二人物的面部图像，对第二人物的面部图像进行扭曲，得到扭曲后的第二人物的面部图像，将扭曲后的第二人物的面部图像输入特征提取模型，得到第二特征图像，将第二特征图像输入第一还原模型，得到第二输出图像，通过增强现实参数集对第二输出图像进行调整，基于当前获取的第二人物的面部图像和调整后的第二输出图像，对特征提取模型和第一还原模型，进行参数更新；