[发明专利]数字人生成方法、装置、电子设备及存储介质在审
申请号: | 202110018557.8 | 申请日: | 2021-01-07 |
公开(公告)号: | CN112767520A | 公开(公告)日: | 2021-05-07 |
发明(设计)人: | 杨国基;刘致远;陈泷翔;王鑫宇;王雅峰;刘云峰 | 申请(专利权)人: | 深圳追一科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06F16/33;G06F16/332 |
代理公司: | 深圳市智圈知识产权代理事务所(普通合伙) 44351 | 代理人: | 苗燕 |
地址: | 518057 广东省深圳市南山区粤海街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数字 人生 成方 装置 电子设备 存储 介质 | ||
本申请实施例公开了一种数字人生成方法、装置、电子设备及存储介质,该方法包括获取控制参数和方位参数,方位参数包括目标物相对于参考位置的相对位置信息;根据控制参数控制3D数字人的动作状态,根据方位参数确定3D数字人的呈现角度;获取与呈现角度和动作状态对应的数字人图像;输出数字人图像。通过该方法的实施,可以获取到控制参数和方位参数,基于控制参数控制3D数字人的动作状态,根据方位参数确定3D数字人的呈现角度,获取并输出与呈现角度对应的数字人图像,使得模拟出用户能够实时与3D数字人处于面对面交流的环境,提升了呈现3D数字人画面的逼真效果,优化了人机交互体验。
技术领域
本申请涉及人机交互技术领域,更具体地,涉及一种数字人生成方法、装置、电子设备及存储介质。
背景技术
近些年来,随着信息技术的不断发展和应用,为满足用户需求,数字人呈现场景也日益增多。传统的数字人呈现方法一般是通过固定几个动作,针对不同场景向用户呈现对应状态下的数字人。而为了提升用户体验,现阶段出现了一种通过数字人呈现的方法,该种方法通常是通过神经网络的训练,控制数字人能够呈现更加多样化的动作,从而保证呈现效果更好。虽然该种方法相较于传统的数字人呈现方法,显示效果更加逼真,但是由于在现有技术中该通过数字人呈现的方法中,数字人呈现画面通常会固定呈现角度,呈现画面的呈现效果不逼真。
发明内容
鉴于上述问题,本申请提出了一种数字人生成方法、装置、电子设备及存储介质,以解决以上问题之一。
第一方面,本申请实施例提供了一种数字人生成方法,该数字人生成方法包括:获取控制参数和方位参数,方位参数包括目标物相对于参考位置的相对位置信息;根据控制参数控制3D数字人的动作状态,根据方位参数确定3D数字人的呈现角度;获取与呈现角度和动作状态对应的数字人图像;以及输出数字人图像。
可选地,获取与呈现角度和动作状态对应的数字人图像,包括:获取3D数字人的当前呈现角度;以及根据当前呈现角度和呈现角度调整数字人图像中3D数字人所呈现的方位,得到与呈现角度对应的数字人图像。
可选地,在获取控制参数和方位参数,方位参数包括目标物相对于参考位置的相对位置信息的步骤之前,数字人生成方法还包括:获取多张包括目标模特的样本图像;根据多张样本图像获取目标模特的形态信息;以及获取原始3D数字人以及原始3D数字人的建模信息,并根据形态信息和建模信息,生成3D数字人。
可选地,形态信息包括面部信息;获取原始3D数字人以及原始3D数字人的建模信息,并根据形态信息和建模信息,生成3D数字人,包括:获取原始3D数字人以及建模信息,建模信息包括原始3D数字人的原始面部关键点;以及根据面部信息获取目标模特的目标面部关键点,将原始面部关键点与目标面部关键点对应,生成3D数字人。
可选地,数字人生成方法还包括:根据面部信息定义目标模特的面部表情;以及将面部表情与目标面部关键点关联,以使3D数字人的面部关键点与面部表情对应。
可选地,获取控制参数和方位参数,方位参数包括目标物相对于参考位置的相对位置信息,包括:获取用于描述目标物位置的第一空间位置信息和用于描述参照物位置的第二空间位置信息,参照物用于为目标物提供参照坐标;根据第一空间位置信息获取3D数字人的目标坐标参数;根据第二空间位置信息获取参照物的参照坐标参数;以及将目标坐标参数与参照坐标参数进行比对,确定目标物与参照物之间的距离和相对角度,得到包括距离和相对角度的方位参数。
可选地,控制参数包括输入信息;根据控制参数控制3D数字人的动作状态,根据方位参数确定3D数字人的呈现角度,包括:获取与输入信息对应的语义信息;根据语义信息得到与语义信息对应的3D数字人的面部表情参数;根据面部表情参数控制3D数字人的面部表情,以控制3D数字人的动作状态。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳追一科技有限公司,未经深圳追一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110018557.8/2.html,转载请声明来源钻瓜专利网。