[发明专利]人像处理方法和装置以及终端有效
申请号: | 202010100149.2 | 申请日: | 2020-02-18 |
公开(公告)号: | CN111385514B | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 田春长;汪亮 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | H04N7/14 | 分类号: | H04N7/14;H04N21/4788;G06F3/01 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 王洪 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 人像 处理 方法 装置 以及 终端 | ||
1.一种人像处理方法,其特征在于,包括:
终端获取用户的第一图像,所述第一图像包括所述用户的面部,且所述用户的面部的部分区域被虚拟现实VR装置遮挡,所述部分区域包括所述用户的双眼所在的区域;
所述终端将所述第一图像输入人像处理模型,得到第二图像,所述第二图像包括所述用户完整的面部,其中,所述人像处理模型是通过对样本训练数据集训练得到的,所述样本训练数据集包括多个原始图像和与所述多个原始图像对应的多个还原图像,其中,所述多个原始图像是对至少一个样本用户采集得到的,所述多个原始图像中的第一原始图像包括第一样本用户,且所述第一样本用户的面部的所述部分区域被VR装置遮挡,所述多个还原图像中第一还原图像包括所述第一样本用户完整的面部,所述至少一个样本用户包括所述第一样本用户;
所述终端向接收端发送所述第二图像;
其中,所述终端将所述第一图像输入人像处理模型,得到第二图像,包括:
所述终端将所述第一图像和特征参考信息输入所述人像处理模型,得到所述第二图像,其中,所述特征参考信息包括眼部特征参数和头部特征参数中的至少一项,所述眼部特征参数包括位置信息、尺寸信息、视角信息中的至少一项,所述位置信息用于指示所述用户的两只眼睛中每只眼睛的位置,所述尺寸信息用于指示所述每只眼睛的尺寸、所述视角信息用于指示所述每只眼睛的眼球注视角度,所述头部特征参数包括所述用户的头部的三轴姿态角和加速度。
2.根据权利要求1所述的方法,其特征在于,所述特征参考信息包括所述眼部特征参数,在所述终端将所述第一图像和特征参考信息输入所述人像处理模型,得到所述第二图像之前,所述方法还包括:
所述终端接收第二摄像装置拍摄的所述用户的第四图像,所述第四图像包括所述用户的所述两只眼睛,其中,所述第二摄像装置为所述VR装置内置的摄像装置;
所述终端从所述第四图像中提取所述眼部特征参数。
3.根据权利要求1所述的方法,其特征在于,所述特征参考信息包括所述头部特征参数,在所述终端将所述第一图像和特征参考信息输入所述人像处理模型,得到所述第二图像之前,所述方法还包括:
所述终端接收惯性测量装置测量的所述头部特征参数。
4.根据权利要求1所述的方法,其特征在于,所述终端获取用户的第一图像,包括:
所述终端通过第一摄像装置拍摄所述第一图像。
5.根据权利要求1所述的方法,其特征在于,所述终端获取用户的第一图像,包括:
所述终端通过第一摄像装置拍摄第三图像,所述第三图像包括所述用户;
所述终端从所述第三图像中截取所述第一图像。
6.根据权利要求5所述的方法,其特征在于,所述终端向接收端发送所述第二图像,包括:
所述终端将所述第二图像和第五图像进行拼接,得到目标图像,其中,所述第五图像为从所述第三图像中截取所述第一图像后的图像;
所述终端向所述接收端发送所述目标图像。
7.根据权利要求5所述的方法,其特征在于,所述终端向接收端发送所述第二图像,包括:
所述终端将所述第二图像和所述第三图像进行合成,得到目标图像,其中,所述第二图像覆盖在所述第三图像中的所述第一图像的上层;
所述终端向所述接收端发送所述目标图像。
8.根据权利要求1至7中任一项所述的方法,其特征在于,所述方法还包括:
在所述第二图像中所述用户双眼所在的区域上叠加眼罩图层,所述眼罩图层经过第一透明度的透视化处理。
9.根据权利要求1至7中任一项所述的方法,其特征在于,所述人像处理模型是通过生成对抗网络模型对所述样本训练数据集训练得到的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010100149.2/1.html,转载请声明来源钻瓜专利网。