[发明专利]一种虚拟主播生成系统、方法和存储介质在审
申请号: | 202010371869.2 | 申请日: | 2020-05-06 |
公开(公告)号: | CN111696182A | 公开(公告)日: | 2020-09-22 |
发明(设计)人: | 李新福 | 申请(专利权)人: | 广东康云科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06F16/951;G06N3/08;G10L13/02;H04N21/43 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 黎扬鹏 |
地址: | 510000 广东省广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 虚拟 生成 系统 方法 存储 介质 | ||
1.一种虚拟主播生成系统,其特征在于,包括:
第一数据库,用于存储从互联网爬取的素材数据;所述素材数据为用于描述人的体型特征、脸部特征和/或头部特征的图片、视频和/或计算机图形;
第二数据库,用于存储根据所述素材数据进行AI深度学习所得的仿真人体模型数据;
动画合成模块,用于获取所述仿真人体模型数据进行动画合成;
语音合成模块,用于获取语音信号,将所述语音信号同步合成至所述动画合成模块合成所得的动画中,获得虚拟主播。
2.根据权利要求1所述的虚拟主播生成系统,其特征在于,所述第一数据库包括多个子数据库,各所述子数据库分别用于存储各细节特征对应的图片、视频和/或计算机图形;各所述细节特征由所述体型特征、脸部特征和/或头部特征解构所得。
3.根据权利要求2所述的虚拟主播生成系统,其特征在于,各所述细节特征分别用于描述眉毛、眼睛、鼻子、嘴巴、耳朵和/手部的动作。
4.根据权利要求1所述的虚拟主播生成系统,其特征在于,所述动画合成模块包括:
请求接收子模块,用于接收动画合成请求;
数据选择子模块,用于根据所述动画合成请求,从所述第二数据库中选择读取相应的仿真人体模型数据;
合成模板子模块,用于根据所述动画合成请求,选择相应的合成模板,将所述数据选择子模块选择读取的仿真人体模型数据合成至所述合成模板中;所述合成模板包括人形模板、动物形模板和卡通模板。
5.根据权利要求1所述的虚拟主播生成系统,其特征在于,所述语音合成模块包括:
稿件生成子模块,用于生成需要播放的稿件;
第三方调用子模块,用于调用第三方语音系统,获取所述第三方语音系统对所述稿件进行阅读所得的语音信号。
6.一种虚拟主播生成方法,其特征在于,包括以下步骤:
从互联网爬取素材数据,所述素材数据为用于描述人的体型特征、脸部特征和/或头部特征的图片、视频和/或计算机图形;
将所述素材数据存储到第一数据库;
对所述素材数据进行AI深度学习,获得仿真人体模型数据;
将所述仿真人体模型数据存储到第二数据库;
对所述仿真人体模型数据进行合成,获得动画;
获取语音信号;
将所述语音信号同步合成至所述动画中,获得虚拟主播。
7.根据权利要求6所述的虚拟主播生成方法,其特征在于,所述将所述素材数据存储到第一数据库这一步骤,具体包括:
在所述第一数据库中创建多个子数据库;
对各所述体型特征、脸部特征和/或头部特征进行解构,获得多个细节特征;各所述细节特征分别用于描述眉毛、眼睛、鼻子、嘴巴、耳朵和/手部的动作;
将各所述细节特征对应的图片、视频和/或计算机图形分别存储到相应的子数据库中。
8.根据权利要求6所述的虚拟主播生成方法,其特征在于,所述对所述仿真人体模型数据进行合成,获得动画这一步骤,具体包括:
接收动画合成请求;
根据所述动画合成请求,从所述第二数据库中选择读取相应的仿真人体模型数据;
根据所述动画合成请求,选择相应的合成模板,将所述数据选择子模块选择读取的仿真人体模型数据合成至所述合成模板中;所述合成模板包括人形模板、动物形模板和卡通模板。
9.根据权利要求6所述的虚拟主播生成方法,其特征在于,所述获取语音信号这一步骤,具体包括:
生成需要播放的稿件;
调用第三方语音系统;
获取所述第三方语音系统对所述稿件进行阅读所得的语音信号。
10.一种存储介质,其中存储有处理器可执行的指令,其特征在于,所述处理器可执行的指令在由处理器执行时用于执行如权利要求6-9任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东康云科技有限公司,未经广东康云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010371869.2/1.html,转载请声明来源钻瓜专利网。