[发明专利]一种虚拟直播的方法、装置、电子设备及存储介质在审
申请号: | 201910745482.6 | 申请日: | 2019-08-13 |
公开(公告)号: | CN110691279A | 公开(公告)日: | 2020-01-14 |
发明(设计)人: | 马里千;郑文;张国鑫;黄旭为;刘晓强;张博宁 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | H04N21/45 | 分类号: | H04N21/45;H04N21/44;H04N21/472;H04N21/81;H04N21/2187;G06K9/00 |
代理公司: | 11319 北京润泽恒知识产权代理有限公司 | 代理人: | 李娜 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 直播 虚拟 场景 虚拟形象 姿态变化信息 虚拟场景 存储介质 电子设备 个性特征 特征构建 真实场景 真实人物 姿态变化 视频流 驱动 保留 | ||
1.一种虚拟直播的方法,其特征在于,包括:
获取实际直播场景中的非直播者特征和直播者特征;
根据所述非直播者特征和所述直播者特征,建立虚拟直播场景,所述虚拟直播场景包含根据所述非直播者特征建立的虚拟场景、以及根据所述直播者特征建立的虚拟形象;
识别直播视频流中所述直播者的姿态变化信息;
根据所述姿态变化信息,驱动所述虚拟直播场景中虚拟形象的姿态变化。
2.根据权利要求1所述的方法,其特征在于,所述根据所述非直播者特征和所述直播者特征,建立虚拟直播场景之后,还包括:
对已建立的虚拟直播场景执行编辑操作,所述编辑操作至少包括如下任意一种:编辑所述已建立的虚拟直播场景中虚拟场景的特征、编辑所述已建立的虚拟直播场景中虚拟形象的特征、调节所述已建立的虚拟直播场景中的虚拟场景的第一虚拟程度,调节所述已建立的虚拟直播场景中的虚拟形象的第二虚拟程度;
保存编辑后的虚拟直播场景。
3.根据权利要求1所述的方法,其特征在于,所述实际直播场景中的直播者数量大于1,则所述建立虚拟直播场景之后,还包括:
建立所述实际直播场景中的直播者特征与虚拟形象之间的第一映射关系;
所述识别直播视频流中直播者的姿态变化信息,包括:
识别所述直播视频流中每一个直播者的姿态变化信息;
建立所述直播视频流中的直播者与姿态变化信息之间的第二映射关系;
所述根据所述姿态变化信息,驱动所述虚拟直播场景中虚拟形象的姿态变化,包括:
根据所述第二映射关系,确定所述直播视频流中各直播者对应的姿态变化信息;
根据所述第一映射关系、以及所述直播视频流中各直播者对应的姿态变化信息,驱动所述虚拟直播场景中各虚拟形象的姿态变化。
4.根据权利要求1所述的方法,其特征在于,所述根据所述姿态变化信息,驱动所述虚拟直播场景中虚拟形象的姿态变化之后,还包括:
根据所述虚拟直播场景对应的图像帧,生成虚拟直播视频流;
通过预先建立的通信链路向接收端发送所述虚拟直播视频流。
5.根据权利要求1所述的方法,其特征在于,所述非直播者特征包括:室内场景特征和/或室外场景特征;其中,
所述室内场景特征包括:室内三维建模信息、室内材质贴图信息、室内光照信息中的至少一种;
所述室外场景特征包括:室外场景360度环境图像信息、室外光照信息中的至少一种。
6.根据权利要求1所述的方法,其特征在于,所述直播者特征包括:直播者头部信息、直播者身体信息、直播者相关信息;其中,
所述直播者头部信息包括:直播者头部三维信息、直播者面部三维信息中的至少一种;
所述直播者身体信息包括:直播者身体三维信息、直播者服饰三维信息、服饰材质信息中的至少一种;
所述直播者相关信息包括:直播者表情三维信息、直播者声音信息、直播者配饰信息中的至少一种。
7.根据权利要求1所述的方法,其特征在于,所述姿态变化信息包括:头部姿态变化信息、面部表情变化信息、身体姿态变化信息、手部姿态变化信息中的至少一种。
8.一种虚拟直播的装置,其特征在于,包括:
特征获取模块,被配置为获取实际直播场景中的非直播者特征和直播者特征;
虚拟构建模块,被配置为根据所述非直播者特征和所述直播者特征,建立虚拟直播场景,所述虚拟直播场景包含根据所述非直播者特征建立的虚拟场景、以及根据所述直播者特征建立的虚拟形象;
直播者识别模块,被配置为识别直播视频流中所述直播者的姿态变化信息;
直播驱动模块,被配置为根据所述姿态变化信息,驱动所述虚拟直播场景中虚拟形象的姿态变化。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910745482.6/1.html,转载请声明来源钻瓜专利网。