[发明专利]虚拟礼物特效的合成方法和装置、直播系统有效
申请号: | 201910859947.0 | 申请日: | 2019-09-11 |
公开(公告)号: | CN110536151B | 公开(公告)日: | 2021-11-19 |
发明(设计)人: | 杨克敏;陈杰;欧燕雄 | 申请(专利权)人: | 广州方硅信息技术有限公司 |
主分类号: | H04N21/2187 | 分类号: | H04N21/2187;H04N21/431;H04N21/4402;H04N21/4788;H04N21/485 |
代理公司: | 北京市立方律师事务所 11330 | 代理人: | 刘延喜 |
地址: | 511442 广东省广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 礼物 特效 合成 方法 装置 直播 系统 | ||
1.一种虚拟礼物特效的合成方法,其特征在于,包括以下步骤:
观众客户端接收直播视频流数据和目标特效礼物,从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息;其中,所述合成位置信息包括基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置;
将所述直播视频分割为前景图像层和背景图像层,并根据目标特效礼物生成至少一个虚拟礼物特效层;
根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示,包括:根据目标特效礼物标识确定各所述虚拟礼物特效层与所述前景图像层和背景图像层的优先级;根据所述合成位置信息将各所述虚拟礼物特效层、前景图像层和背景图像层按照所述优先级由高到低进行合成并展示。
2.根据权利要求1所述的虚拟礼物特效的合成方法,其特征在于,所述根据所述合成位置信息将各所述虚拟礼物特效层、前景图像层和背景图像层按照所述优先级由高到低进行合成并展示的步骤包括:
根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照所述优先级由高到低进行合成,得到特效帧图像;
将所述特效帧图像渲染到特效展示区域进行展示。
3.根据权利要求2所述的虚拟礼物特效的合成方法,其特征在于,所述将所述特效帧图像渲染到特效展示区域进行展示的步骤包括:
在直播窗口上设置特效展示区域;
在播放直播视频的过程中,在所述特效展示区域同步渲染所述特效帧图像。
4.根据权利要求1所述的虚拟礼物特效的合成方法,其特征在于,对所述直播视频分割为前景图像层和背景图像层的步骤包括:
从所述直播视频中获取当前视频帧图像;
将所述当前视频帧图像分割为前景区域和背景区域;其中,所述前景区域所在图层为前景图像层;所述背景区域所在图层为背景图像层。
5.根据权利要求1所述的虚拟礼物特效的合成方法,其特征在于,所述前景图像层包括直播视频中的人物区域,所述背景图像层包括直播视频中除人物区域外的背景区域。
6.根据权利要求1所述的虚拟礼物特效的合成方法,其特征在于,所述基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置的步骤包括:
获取所述直播视频的当前视频帧图像,提取所述当前视频帧图像中的人物轮廓关键点;
根据所述人物轮廓关键点确定特征区域在所述当前视频帧图像上对应的目标位置,以在所述目标位置对所述目标特效礼物进行合成。
7.根据权利要求1至6任一项所述的虚拟礼物特效的合成方法,其特征在于,所述目标特效礼物为三维显示形式的特效礼物。
8.根据权利要求1至6任一项所述的虚拟礼物特效的合成方法,其特征在于,所述合成位置信息包括:人脸信息、人体轮廓信息、手势信息和人体骨骼信息中的至少一者。
9.一种虚拟礼物特效的合成方法,其特征在于,包括以下步骤:
接收主播客户端发送的直播视频流数据;其中,所述直播视频流数据中包括直播视频和目标特效礼物的合成位置信息;
将所述直播视频流数据转发至观众客户端;其中,所述观众客户端将所述直播视频分割为前景图像层和背景图像层,并根据目标特效礼物生成至少一个虚拟礼物特效层;根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示,包括:根据目标特效礼物标识确定各所述虚拟礼物特效层与所述前景图像层和背景图像层的优先级;根据所述合成位置信息将各所述虚拟礼物特效层、前景图像层和背景图像层按照所述优先级由高到低进行合成并展示。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州方硅信息技术有限公司,未经广州方硅信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910859947.0/1.html,转载请声明来源钻瓜专利网。