[发明专利]一种虚拟主播生成系统、方法和存储介质在审
申请号: | 202010371869.2 | 申请日: | 2020-05-06 |
公开(公告)号: | CN111696182A | 公开(公告)日: | 2020-09-22 |
发明(设计)人: | 李新福 | 申请(专利权)人: | 广东康云科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06F16/951;G06N3/08;G10L13/02;H04N21/43 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 黎扬鹏 |
地址: | 510000 广东省广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 虚拟 生成 系统 方法 存储 介质 | ||
本发明公开了一种虚拟主播生成系统、方法和存储介质,所述系统包括第一数据库、第二数据库、动画合成模块和语音合成模块,其中第一数据库用于存储从互联网爬取的素材数据,第二数据库用于存储仿真人体模型数据,动画合成模块用于动画合成,语音合成模块用于将语音信号同步合成至动画中,获得虚拟主播。本发明可以实现绘声绘色的虚拟主播,可以通过服务器来实现,开放给不同的用户接入,用户只需向虚拟主播生成系统发送动画合成请求和稿件,便可接收反馈回来的虚拟主播,用户无需承担虚拟主播生成系统的维护任务,虚拟主播生成系统可以通过大规模提供服务从而降低成本,有利于虚拟主播生成系统的应用和发展。本发明广泛应用于虚拟现实技术领域。
技术领域
本发明涉及虚拟现实技术领域,尤其是一种虚拟主播生成系统、方法和存储介质。
背景技术
虚拟主播具有形象活泼生动、不受休息时间影响、全天候工作的优点,已应用在媒体等领域。但是,现有的虚拟主播生成技术需要依赖强大的硬件和软件支持,实现成本较高,因此目前主要被掌握在大型传媒公司以及动画制作公司等主体,众多的自媒体等小型制作单位则无法高质量地应用虚拟主播技术,这对虚拟主播技术的应用和发展产生不利影响。
发明内容
针对上述至少一个技术问题,本发明的目的在于提供一种虚拟主播生成系统、方法和存储介质。
一方面,本发明实施例包括一种虚拟主播生成系统,包括:
第一数据库,用于存储从互联网爬取的素材数据;所述素材数据为用于描述人的体型特征、脸部特征和/或头部特征的图片、视频和/或计算机图形;
第二数据库,用于存储根据所述素材数据进行AI深度学习所得的仿真人体模型数据;
动画合成模块,用于获取所述仿真人体模型数据进行动画合成;
语音合成模块,用于获取语音信号,将所述语音信号同步合成至所述动画合成模块合成所得的动画中,获得虚拟主播。
进一步地,所述第一数据库包括多个子数据库,各所述子数据库分别用于存储各细节特征对应的图片、视频和/或计算机图形;各所述细节特征由所述体型特征、脸部特征和/或头部特征解构所得。
进一步地,各所述细节特征分别用于描述眉毛、眼睛、鼻子、嘴巴、耳朵和/手部的动作。
进一步地,所述动画合成模块包括:
请求接收子模块,用于接收动画合成请求;
数据选择子模块,用于根据所述动画合成请求,从所述第二数据库中选择读取相应的仿真人体模型数据;
合成模板子模块,用于根据所述动画合成请求,选择相应的合成模板,将所述数据选择子模块选择读取的仿真人体模型数据合成至所述合成模板中;所述合成模板包括人形模板、动物形模板和卡通模板。
进一步地,所述语音合成模块包括:
稿件生成子模块,用于生成需要播放的稿件;
第三方调用子模块,用于调用第三方语音系统,获取所述第三方语音系统对所述稿件进行阅读所得的语音信号。
另一方面,本发明实施例还包括一种虚拟主播生成方法,包括以下步骤:
从互联网爬取素材数据,所述素材数据为用于描述人的体型特征、脸部特征和/或头部特征的图片、视频和/或计算机图形;
将所述素材数据存储到第一数据库;
对所述素材数据进行AI深度学习,获得仿真人体模型数据;
将所述仿真人体模型数据存储到第二数据库;
对所述仿真人体模型数据进行合成,获得动画;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东康云科技有限公司,未经广东康云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010371869.2/2.html,转载请声明来源钻瓜专利网。