[发明专利]用于生成信息的方法和装置有效
申请号: | 201910573150.4 | 申请日: | 2019-06-28 |
公开(公告)号: | CN110298906B | 公开(公告)日: | 2023-08-11 |
发明(设计)人: | 黄靖博;范美华;何建斌;王励皓;蔡振盛;孔世康;赵亚飞;王建祥;陈超;陈波;李全港;刘羽 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;H04N7/15;G10L13/00;G10L15/18 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 生成 信息 方法 装置 | ||
1.一种用于生成信息的方法,包括:
接收客户端发送的用户的视频和音频;
对所述视频和音频进行分析处理,确定所述用户的意图类别,包括:对所述视频中的视频帧进行识别处理,得到用户特征信息;对所述音频进行语音识别,得到所述音频对应的文本信息;对所述用户特征信息和所述音频对应的文本信息进行分词,得到至少一个分词;将所述至少一个分词输入预先建立的意图分类模型,得到所述用户的意图类别,其中,所述意图分类模型用于表征分词集合与意图类别的对应关系;
根据所述用户的意图类别和预设的业务信息集合,生成反馈信息,其中,所述意图类别是根据客户端所应用的业务场景预先设置的,所述预设的业务信息集合用于存储与客户端所应用的业务场景相关的各种业务信息;
基于所述反馈信息,通过动画引擎生成预先建立的三维虚拟人像的视频;
将所述三维虚拟人像的视频发送给所述客户端,以供所述客户端呈现给所述用户。
2.根据权利要求1所述的方法,其中,所述反馈信息为文本反馈信息;以及
所述基于所述反馈信息,通过动画引擎生成预先建立的三维虚拟人像的视频,包括:
根据所述文本反馈信息生成语音反馈信息;
根据所述文本反馈信息,从预设的人像信息集合获取目标人像信息,其中,所述目标人像信息包括目标表情信息、目标口型信息和目标动作信息;
根据所述语音反馈信息、目标表情信息、目标口型信息和目标动作信息,通过动画引擎生成三维虚拟人像的视频。
3.根据权利要求2所述的方法,其中,所述人像信息集合包括表情信息集合、口型信息集合和动作信息集合;以及
所述根据所述文本反馈信息,从预设的人像信息集合获取目标人像信息,包括:
根据所述文本反馈信息,从所述表情信息集合中确定目标表情信息;
根据所述文本反馈信息,从所述口型信息集合中确定目标口型信息;
根据所述文本反馈信息,从所述动作信息集合中确定目标动作信息;
将所述目标表情信息、目标口型信息和目标动作信息作为目标人像信息。
4.根据权利要求2所述的方法,其中,所述根据所述文本反馈信息生成语音反馈信息,包括:
将所述文本反馈信息输入预先建立的语音生成模型,生成语音反馈信息,其中,所述语音生成模型用于表征文本与语音的对应关系,所述语音生成模型是基于真人语音训练得到的。
5.根据权利要求1所述的方法,其中,所述方法还包括:
接收三维虚拟人像的定制请求,其中,所述定制请求包括用于确定三维虚拟人像外观的信息;
根据所述定制请求,确定三维虚拟人像的外观。
6.一种用于生成信息的装置,包括:
接收单元,被配置成接收客户端发送的用户的视频和音频;
分析单元,被配置成对所述视频和音频进行分析处理,确定所述用户的意图类别,包括:对所述视频中的视频帧进行识别处理,得到用户特征信息;对所述音频进行语音识别,得到所述音频对应的文本信息;对所述用户特征信息和所述音频对应的文本信息进行分词,得到至少一个分词;将所述至少一个分词输入预先建立的意图分类模型,得到所述用户的意图类别,其中,所述意图分类模型用于表征分词集合与意图类别的对应关系;
第一生成单元,被配置成根据所述用户的意图类别和预设的业务信息集合,生成反馈信息,其中,所述意图类别是根据客户端所应用的业务场景预先设置的,所述预设的业务信息集合用于存储与客户端所应用的业务场景相关的各种业务信息;
第二生成单元,被配置成基于所述反馈信息,通过动画引擎生成预先建立的三维虚拟人像的视频;
发送单元,被配置成将所述三维虚拟人像的视频发送给所述客户端,以供所述客户端呈现给所述用户。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910573150.4/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置