[发明专利]虚拟图像构建方法、装置、设备及存储介质在审
申请号: | 202110645973.0 | 申请日: | 2021-06-09 |
公开(公告)号: | CN115460372A | 公开(公告)日: | 2022-12-09 |
发明(设计)人: | 邹超洋 | 申请(专利权)人: | 广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司 |
主分类号: | H04N7/15 | 分类号: | H04N7/15;H04N7/14;H04N21/44;H04N21/81;G06T17/00;G06V40/16 |
代理公司: | 北京泽方誉航专利代理事务所(普通合伙) 11884 | 代理人: | 陈照辉 |
地址: | 510530 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 图像 构建 方法 装置 设备 存储 介质 | ||
本申请实施例公开了一种虚拟图像构建方法、装置、设备及存储介质,涉及图像处理技术领域,其包括:获取离线采集的包含目标对象第一人脸图像的第一图像;根据第一人脸图像和预先确定的表情基参数构建目标对象的人脸中性表情基和多个人脸个性化表情基;获取在线采集的包含目标对象第二人脸图像的第二图像;根据人脸中性表情基和多个人脸个性化表情基,确定目标对象的三维人脸模型映射到第二人脸图像时需要的位姿参数和各人脸个性化表情基的权重系数;将位姿参数和权重系数发送至远端设备,以使远端设备根据位姿参数和权重系数生成与第二人脸图像相对应的虚拟图像。采用上述方法可以解决相关技术中传输真实的人脸图像所带来的卡顿现象的技术问题。
技术领域
本申请实施例涉及图像处理技术领域,尤其涉及一种虚拟图像构建方法、装置、设备及存储介质。
背景技术
随着网络通信技术(尤其是5G通信技术)的发展,使得用户足不出户即可利用通信设备(如手机、电脑等)享受视频通话、网上课堂、网上会议等网络通信资源。目前,利用网络通信技术进行视频交流时,通话双方可以看到对方当前的人脸图像。并且,为了提高通话双方的视频交流感受,会传输高清图像,以便于通话双方清楚的看到对应的人脸图像。例如,网上课堂或网上会议时,主讲端的发言者高清人脸图像被会发送至其他设备中,以使其他设备的使用者观看到高清人脸图像。这种视频交流方式存在如下缺陷:传输高清图像对网络带宽具有较高的要求,当网络带宽有限时,容易出现卡顿的现象。
发明内容
本申请实施例提供了一种虚拟图像构建方法、装置、设备及存储介质,以解决相关技术中传输真实的人脸图像所带来的卡顿现象的技术问题。
第一方面,本申请实施例提供了一种虚拟图像构建方法,其特征在于,包括:
获取离线采集的第一图像,所述第一图像包含目标对象的第一人脸图像;
根据所述第一人脸图像和预先确定的表情基参数构建所述目标对象的人脸中性表情基和多个人脸个性化表情基;
获取在线采集的第二图像,所述第二图像包含所述目标对象的第二人脸图像;
根据所述人脸中性表情基和多个所述人脸个性化表情基,确定所述目标对象的三维人脸模型映射到所述第二人脸图像时需要的位姿参数和各所述人脸个性化表情基的权重系数;
将所述位姿参数和所述权重系数发送至远端设备,以使所述远端设备根据所述位姿参数和所述权重系数生成与所述第二人脸图像相对应的虚拟图像。
第二方面,本申请实施例还提供了一种虚拟图像构建装置,包括:
第一图像获取模块,用于获取离线采集的第一图像,所述第一图像包含目标对象的第一人脸图像;
表情基构建模块,用于根据所述第一人脸图像和预先确定的表情基参数构建所述目标对象的人脸中性表情基和多个人脸个性化表情基;
第二图像获取模块,用于获取在线采集的第二图像,所述第二图像包含所述目标对象的第二人脸图像;
参数确定模块,用于根据所述人脸中性表情基和多个所述人脸个性化表情基,确定所述目标对象的三维人脸模型映射到所述第二人脸图像时需要的位姿参数和各所述人脸个性化表情基的权重系数;
参数发送模块,用于将所述位姿参数和所述权重系数发送至远端设备,以使所述远端设备根据所述位姿参数和所述权重系数生成与所述第二人脸图像相对应的虚拟图像。
第三方面,本申请实施例还提供了一种虚拟图像构建设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如第一方面所述的虚拟图像构建方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司,未经广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110645973.0/2.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序