[发明专利]表情重定向方法、装置、设备和介质在审
申请号: | 202110412843.2 | 申请日: | 2021-04-16 |
公开(公告)号: | CN113066156A | 公开(公告)日: | 2021-07-02 |
发明(设计)人: | 李团辉 | 申请(专利权)人: | 广州虎牙科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06K9/00 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 511400 广东省广州市番禺*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 表情 定向 方法 装置 设备 介质 | ||
本发明实施例公开了一种表情重定向方法、装置、设备和介质。该方法包括:实时获取直播视频帧中的人脸图像,并根据标准表情基组确定与所述人脸图像对应的标准表情系数;确定与所述标准表情系数对应的个性化表情系数,其中,所述个性化表情系数与预先生成的目标个性化虚拟形象表情基组是匹配的;将所述个性化表情系数使用到所述目标个性化虚拟形象表情基组上,以驱动与所述目标个性化虚拟形象表情基组对应的个性化虚拟形象的表情。上述技术方案能够解决主播驱动虚拟形象时虚拟形象表情不自然的问题。
技术领域
本发明实施例涉及计算机视觉技术领域,尤其涉及一种表情重定向方法、装置、设备和介质。
背景技术
随着直播行业的流行,越来越多的人作为主播进入了直播行业。但是往往会面临一些问题,比如主播对自己的形象可能不够自信,担心直接将真实容貌暴露在直播环境之中会对直播效果产生影响,又比如主播总是以单一的自我形象进行直播,缺少多样性,限制了许多有趣的直播模式和玩法。因此,虚拟直播应运而生,让主播可以在背后驱动虚拟形象进行个性化直播。
当主播驱动虚拟形象进行个性化直播时,通过自己的表情变化来驱动虚拟形象的表情变化。然而,由于驱动模型的表情基组和虚拟形象表情基组之间通常会存在语义差异,导致将使用驱动模型的表情基组学习到的表情系数迁移到虚拟形象表情基组上时会出现虚拟形象表情不自然问题。
发明内容
本发明实施例提供一种表情重定向方法、装置、设备和介质,以解决主播驱动虚拟形象时虚拟形象表情不自然的问题。
第一方面,本发明实施例提供了一种表情重定向方法,包括:
实时获取直播视频帧中的人脸图像,并根据标准表情基组确定与所述人脸图像对应的标准表情系数;
确定与所述标准表情系数对应的个性化表情系数,其中,所述个性化表情系数与预先生成的目标个性化虚拟形象表情基组是匹配的;
将所述个性化表情系数使用到所述目标个性化虚拟形象表情基组上,以驱动与所述目标个性化虚拟形象表情基组对应的个性化虚拟形象的表情。
第二方面,本发明实施例还提供了一种表情重定向装置,包括:
标准表情系数确定模块,用于实时获取直播视频帧中的人脸图像,并根据标准表情基组确定与所述人脸图像对应的标准表情系数;
个性化表情系数确定模块,用于确定与所述标准表情系数对应的个性化表情系数,其中,所述个性化表情系数与预先生成的目标个性化虚拟形象表情基组是匹配的;
表情重定向模块,用于将所述个性化表情系数使用到所述目标个性化虚拟形象表情基组上,以驱动与所述目标个性化虚拟形象表情基组对应的个性化虚拟形象的表情。
第三方面,本发明实施例还提供了一种计算机设备,所述计算机设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现任意实施例所述的表情重定向方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现任意实施例所述的表情重定向方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州虎牙科技有限公司,未经广州虎牙科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110412843.2/2.html,转载请声明来源钻瓜专利网。