[发明专利]虚拟形象直播方法、终端、计算机设备及存储介质在审
申请号: | 201910877546.8 | 申请日: | 2019-09-17 |
公开(公告)号: | CN110557625A | 公开(公告)日: | 2019-12-10 |
发明(设计)人: | 黄旭为;马里千;张国鑫;刘晓强;张博宁 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | H04N13/275 | 分类号: | H04N13/275;H04N21/2187;H04N21/44;H04N21/4415;H04N21/81 |
代理公司: | 11138 北京三高永信知识产权代理有限责任公司 | 代理人: | 祝亚男 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟形象 虚拟形象模型 渲染 素材数据 直播 表情数据 动作数据 虚拟 面部表情数据 服务器发送 服务器获取 计算机设备 存储介质 身体动作 视频播放 头部动作 网络带宽 虚拟场景 终端接收 服务器 视频 终端 驱动 响应 观看 | ||
1.一种虚拟形象直播方法,其特征在于,应用于直播观看终端,包括:
从服务器获取虚拟形象模型以及虚拟素材数据,所述虚拟素材数据用于渲染所述虚拟形象模型;
响应于所述服务器发送的主播的面部表情数据、头部动作数据以及身体动作数据,驱动所述虚拟形象模型做出对应的动作;
基于所述虚拟素材数据对所做出动作的虚拟形象模型以及虚拟场景进行渲染,将渲染后所获得的虚拟形象视频播放。
2.根据权利要求1所述的方法,其特征在于,所述响应于所述服务器发送的主播的面部表情数据、头部动作数据以及身体动作数据,驱动所述虚拟形象模型做出对应的动作,包括:
基于所述面部表情数据驱动所述虚拟形象模型的面部模型,使所述面部模型做出相应的面部表情;
基于所述头部动作数据驱动所述虚拟形象模型的头部模型,使所述头部模型做出相应的头部动作;
基于所述身体动作数据驱动所述虚拟形象模型的身体模型,使所述身体模型做出相应的身体动作。
3.根据权利要求1所述的方法,其特征在于,所述虚拟素材数据至少包括虚拟形象皮肤数据、环境数据、贴图数据中的一种。
4.根据权利要求1所述的方法,其特征在于,所述将渲染后所获得的虚拟形象视频播放,包括:
获取主播的声音数据;
将所述声音数据与所述渲染后所获得的虚拟形象视频合并后播放。
5.一种虚拟形象直播方法,其特征在于,应用于直播终端,包括:
获取主播的直播视频,所述直播视频包括多个视频帧;
识别每个视频帧中主播的面部表情数据、头部动作数据以及身体动作数据;
向服务器发送携带有所述面部表情数据、头部动作数据和身体动作数据的直播指令,所述直播指令用于指示直播终端基于面部表情数据、头部动作数据和身体动作数据驱动预配置的虚拟形象模型做出对应的动作,并基于虚拟素材数据对所做出动作的虚拟形象模型以及虚拟场景进行渲染,将渲染后所获得的虚拟形象视频在直播观看终端上播放,其中,所述直播终端从服务器获取所述虚拟形象模型以及虚拟素材数据。
6.根据权利要求5所述的方法,其特征在于,所述识别每个视频帧中主播的面部表情数据、头部动作数据以及身体动作数据,包括:
对每个视频帧进行面部识别和身体识别,获得主播的面部图像和身体图像;
分别对所述面部图像和身体图像进行分析,获得所述每个视频帧的面部参数、头部参数以及身体参数;
将所述每个视频帧的面部参数、头部参数以及身体参数按照视频帧顺序分别进行合并,获得面部表情数据、头部动作数据和身体动作数据。
7.一种直播观看终端,其特征在于,包括:
获取单元,被配置为执行从服务器获取虚拟形象模型以及虚拟素材数据,所述虚拟素材数据用于渲染所述虚拟形象模型;
驱动单元,被配置为响应于所述服务器发送的主播的面部表情数据、头部动作数据以及身体动作数据,驱动所述虚拟形象模型做出对应的动作;
渲染单元,被配置为基于所述虚拟素材数据对所做出动作的虚拟形象模型以及虚拟场景进行渲染,将渲染后所获得的虚拟形象视频播放。
8.一种直播终端,其特征在于,包括:
获取单元,被配置为获取主播的直播视频,所述直播视频包括多个视频帧;
识别单元,被配置为识别每个视频帧中主播的面部表情数据、头部动作数据以及身体动作数据;
直播单元,被配置为向服务器发送携带有所述面部表情数据、头部动作数据和身体动作数据的直播指令,所述直播指令用于指示直播终端基于面部表情数据、头部动作数据和身体动作数据驱动预配置的虚拟形象模型做出对应的动作,并基于虚拟素材数据对所做出动作的虚拟形象模型以及虚拟场景进行渲染,将渲染后所获得的虚拟形象视频在直播观看终端上播放,其中,所述直播终端从服务器获取所述虚拟形象模型以及虚拟素材数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910877546.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:数据传输方法、装置及服务器
- 下一篇:一种图像显示的方法及电子设备