[发明专利]语音问答方法、装置、计算机设备和存储介质有效
申请号: | 201910843761.6 | 申请日: | 2019-09-06 |
公开(公告)号: | CN110717020B | 公开(公告)日: | 2022-09-27 |
发明(设计)人: | 辛婷婷;邹若奇 | 申请(专利权)人: | 平安国际智慧城市科技股份有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/33;G06T11/60;G06F40/151;G06F9/451 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 杨欢 |
地址: | 518000 广东省深圳市前海深港合*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 问答 方法 装置 计算机 设备 存储 介质 | ||
1.一种语音问答方法,所述方法包括:
接收语音问答指令,所述语音问答指令携带画图讲解标识,根据所述画图讲解标识调用对应的画图讲解组件;
从所述画图讲解组件中得到问题文本,将所述问题文本转换为问题语音并播放所述问题语音;
当所述问题语音播放完成时,从所述画图讲解组件中得到讲解界面标识,根据所述讲解界面标识获取对应的讲解界面;
通过所述讲解界面接收画图指令,根据所述画图指令调用预设画图编辑器,显示画图编辑界面;
当通过所述画图编辑界面接收讲解指令时,根据所述讲解指令获取到已编辑图形信息并接收到讲解语音,将所述已编辑图形信息和所述讲解语音发送服务器,包括:当通过画图编辑界面接收讲解提示指令时,根据讲解提示指令从画图讲解组件中获取提示文本,并将提示文本在画图编辑界面显示;
获取所述服务器返回的根据所述已编辑图形信息和所述讲解语音得到的画图讲解评价信息并显示。
2.根据权利要求1所述的方法,其特征在于,所述将所述已编辑图形信息和所述讲解语音发送服务器,包括:
识别所述讲解语音,得到讲解文本,将所述讲解文本与所述画图讲解组件中的目标文本进行匹配,得到第一匹配得分;
将所述已编辑图形信息与所述画图讲解组件中的目标图形进行匹配,得到第二匹配得分;
根据所述第一匹配得分和所述第二匹配得分,得到画图讲解评价得分,将所述已编辑图形信息、所述讲解语音和画图讲解评价得分发送服务器。
3.根据权利要求2所述的方法,其特征在于,所述识别所述讲解语音,得到讲解文本,将所述讲解文本与所述画图讲解组件中的目标文本进行匹配,得到第一匹配得分,包括:
将所述讲解语音预处理得到讲解音频,从所述讲解音频中提取音频特征;
将所述音频特征输入到已训练的语音识别模型中,得到语音识别结果,根据语音识别结果得到讲解文本;
将所述讲解文本分词,根据分词结果得到讲解词向量,并将所述目标文本分词,根据分词结果得到目标词向量;
将所述讲解词向量和所述目标词向量输入到已训练的文本相似识别模型中,得到相似识别结果,根据相似识别结果得到第一匹配得分。
4.根据权利要求2所述的方法,其特征在于,所述将所述已编辑图形信息与所述画图讲解组件中的目标图形进行匹配,得到第二匹配得分,包括:
将所述已编辑图形信息和所述目标图形输入到已训练的图形匹配模型中,得到图形匹配结果,根据所述图形 匹配结果得到第二匹配得分,所述图形匹配模型是根据已有图形使用卷积神经网络算法训练得到的。
5.根据权利要求1-4任一项所述的方法,其特征在于,在所述接收语音问答指令,所述语音问答指令携带画图讲解标识,根据所述画图讲解标识调用对应的画图讲解组件之前,还包括:
接收画图讲解组件配置指令,根据所述配置指令从服务器获取图形标识列表并显示;
接收图形标识选择指令,所述图形标识选择指令携带有目标图形标识,根据所述图形标识选择指令向所述服务器发送目标图形获取请求;
获取所述服务器返回的与所述目标图形标识关联的目标图形、目标问题文本和目标答复文本,将所述目标图形、所述目标问题文本和所述目标答复文本写入预设画图讲解组件模板中,得到画图讲解组件。
6.根据权利要求2所述的方法,其特征在于,所述识别所述讲解语音,得到讲解文本,包括:
从所述讲解语音中提取声学特征,将所述声学特征通过声学模型转换成发音的音素,使用解码技术将所述音素转换成所述讲解文本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安国际智慧城市科技股份有限公司,未经平安国际智慧城市科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910843761.6/1.html,转载请声明来源钻瓜专利网。