[发明专利]一种语音识别自动化测试系统及方法

说明书

本发明提供了一种语音识别自动化测试系统及方法，该系统包括客户端、前端测试服务器、后端测试服务器、云端服务器，前端测试服务器接收客户端发送的包括待测设备类型、测试背景环境、测试模式的测试请求，从本地语料数据库中查找与待测设备类型对应的语料集合，从本地音频数据库中查找与语料集合和测试背景环境相对应的音频数据集合，将语料集合、音频数据集合和测试模式生成的测试任务发送至后端测试服务器；后端测试服务器采用与测试模式对应的合成方式对语料集合和音频数据集合进行合成得到合成数据，将云端服务器的人工智能语音识别系统针对合成数据的识别结果和预期结果进行匹配并依据匹配结果得到测试结果。

技术领域

本发明涉及自动化测试技术领域，特别是涉及一种语音识别自动化测试系统及方法。

背景技术

随着语音识别技术的快速发展和应用，语音识别技术的搭载率也明显提升。目前语音识别的准确率基本超过了95％，已经成为汽车智能化领域不可或缺的一部分。为了增加语音识别的信任度，语音识别的自动化测试过程是研发阶段必不可缺少的环节，有效且准确地自动化测试系统是对应用语音识别产品有力的质量保证和服务保证。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的语音识别自动化测试系统及方法。

依据本发明一方面，提供了一种语音识别自动化测试系统，包括：

前端测试服务器，适于接收来自客户端的针对人工智能语音识别系统进行测试的测试请求，从所述测试请求中解析出包括待测设备类型、待测设备所处的测试背景环境和测试模式的测试配置信息，其中，所述待测设备为应用所述人工智能语音识别系统的设备；

所述前端测试服务器，还适于从本地语料数据库中查找与所述待测设备类型对应的语料集合，所述语料集合包含原始语料和原始语料期待的自然语言理解的指令信息，从本地音频数据库中查找与所述语料集合和所述测试背景环境相对应的音频数据集合，所述音频数据集合包含与所述语料集合对应的语料音频和与所述测试背景环境对应的背景音频，依据语料集合、音频数据集合和测试模式生成测试任务发送至后端测试服务器；

所述后端测试服务器，适于依据所述测试任务中的测试模式确定合成方式，按照所述合成方式合成所述测试任务中所述音频数据集合中的语料音频和背景音频得到合成数据，将合成数据发送至云端服务器；

所述云端服务器，包括所述人工智能语音识别系统，所述人工智能语音识别系统对所述合成数据执行自动语音识别处理或自然语言理解响应处理，将处理结果返回至后端测试服务器；

所述后端测试服务器，还适于将所述测试任务中所述语料集合中的原始语料或所述原始语料期待的自然语言理解的指令信息作为预期结果与所述处理结果进行匹配，依据匹配结果生成测试结果并经由所述前端测试服务器反馈至所述客户端。

可选地，所述后端测试服务器包括测试模式确定模块，所述测试模式确定模块适于依据所述测试任务中的数字合成模式确定出数字合成方式，依据所述测试任务中的多声源模拟合成模式确定出模拟合成方式。

可选地，所述后端测试服务器还包括：针对数字合成模式设置的数字测试模块和字节码合成器，

所述数字测试模块，适于配置数字测试参数，基于所述数字测试参数、语料集合、音频数据集合创建数字测试任务，将所述数字测试任务发送至所述字节码合成器；

所述字节码合成器，适于依据数字测试任务中的数字测试参数从所述音频数据集合解析出语料音频和背景音频，将所述语料音频和背景音频按照数字合成方式合成得到音频混合字节流集合；

所述数字测试模块，还适于获取所述音频混合字节流集合并发送至所述云端服务器。

可选地，所述后端测试服务器还包括针对多声源模拟合成模式设置的模拟测试模块和声源合成模块、所述测试系统还包括待测设备，