[发明专利]人像处理方法和装置以及终端有效
申请号: | 202010100149.2 | 申请日: | 2020-02-18 |
公开(公告)号: | CN111385514B | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 田春长;汪亮 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | H04N7/14 | 分类号: | H04N7/14;H04N21/4788;G06F3/01 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 王洪 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 人像 处理 方法 装置 以及 终端 | ||
本申请提供了人像处理方法和装置以及终端,能够还原用户被虚拟现实设备遮挡的面部特征,从而提高接收端的用户体验。该方法包括:终端获取用户的第一图像,该第一图像包括该用户的面部,且该用户的面部的部分区域被虚拟现实VR装置遮挡,该部分区域包括该用户的双眼所在的区域;该终端将该第一图像输入人像处理模型,得到第二图像,该第二图像包括该用户完整的面部;该终端向接收端发送该第二图像。
技术领域
本申请涉及终端技术领域,并且更具体地,涉及终端技术领域中的人像处理方法和装置以及终端。
背景技术
随着通信技术的不断发展和进步,随时随地的大宽带服务为虚拟现实(virtualreality,VR)技术的应用发展提供更宽的平台。
在众多的VR应用中,沉浸式视频通话是一种非常重要的业务。沉浸式视频通话指通话双方佩戴VR装置进行视频通话,每方通话者身边设置有摄像头,该摄像头能够拍摄通话者视频通话时所处的实景,并传输至对方的VR装置呈现出来,以实现模拟与对方实景对话的通话效果。
然而,由于在用户佩戴VR装置进行视频通话的时候,VR装置会遮挡住用户面部的部分区域,例如,VR眼镜会遮挡住用户的眼睛,因此,通过摄像头拍摄用户的通话实景时,对方看不到用户的眼部动作和表情等面部特征,用户体验较差。
发明内容
本申请提供一种人像处理方法和装置以及终端,能够还原用户被VR装置遮挡的面部特征,从而提高接收端的用户体验。
第一方面,本申请提供一种人像处理方法,该方法包括:获取用户的第一图像,所述第一图像包括所述用户的面部,且所述用户的面部的部分区域被虚拟现实VR装置遮挡,所述部分区域包括所述用户的双眼所在的区域;将所述第一图像输入人像处理模型,得到第二图像,所述第二图像包括所述用户完整的面部,其中,所述人像处理模型是通过对样本训练数据集训练得到的,所述样本训练数据集包括多个原始图像和与所述多个原始图像对应的多个还原图像,其中,所述多个原始图像是对至少一个样本用户采集得到的,所述多个原始图像中的第一原始图像包括第一样本用户,且所述第一样本用户的面部的所述部分区域被VR装置遮挡,所述多个还原图像中第一还原图像包括所述第一样本用户完整的面部,所述至少一个样本用户包括所述第一样本用户;向接收端发送所述第二图像。
采用本申请实施例提供的人像处理方法,能够还原用户被VR装置遮挡的面部特征,从而提高接收端的用户体验。
可选地,所述人像处理装置还可以通过其它方式获取所述第一图像,本申请实施例对此不作限定。
在第一种可能的实现方式中,所述人像处理装置可以接收所述第一摄像装置拍摄的第三图像,所述第三图像包括所述用户,所述人像处理装置从所述第三图像中截取所述第一图像。
需要说明的是,所述第一摄像装置可以为如图1中所示的摄像装置120。所述第一摄像装置和所述人像处理装置可以分别为独立的装置,或所述第一摄像装置和所述人像处理装置可以集成在同一个设备中,本申请实施例对此不作限定。
需要说明的是,所述第三图像可以至少包括所述用户。也就是说,所述第三图像还可以包括所述用户所处的环境或场景,本申请实施例对此不作限定。
需要说明的是,本申请实施例仅以所述用户的面部的部分区域为双眼所在区域为例进行介绍,应理解,该部分区域还可以包括所述用户的面部的其他区域,本申请实施例对此不作限定。
还需要说明的是,所述第一图像可以至少包括所述用户的面部,其中,所述用户的面部的部分区域被VR装置遮挡。
可选地,所述第一图像还可以包括所述用户的其他部位和所述用户所处的环境中的至少一项,或所述第一图像还可以包括除所述用户以外的其他用户,其中,对其它用户的人像处理方法与对所述用户人像处理方法类似,为避免重复,此处不再赘述。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010100149.2/2.html,转载请声明来源钻瓜专利网。