[发明专利]语音合成系统的评测方法和系统

权利要求书

1.一种语音合成系统的评测方法，该评测方法包括客观评测步骤，所述客观评测步骤包括：

第一数据接收步骤：接收用户上传的第一数据，其中，所述第一数据是将至少一个测试集输入到待评测的语音合成系统后输出的第一前端结果；

第一数据处理步骤：响应于用户对至少一个客观评测模式的选择，对所述第一数据进行解析和拆分，得到与所述客观评测模式对应的第二数据；

客观比对步骤：将所述第二数据与第三数据进行比对得到客观评测结果，其中，所述第三数据是基于所述客观评测模式对预置的所述测试集的完整的客观评测答案进行解析和拆分后得到的数据；和

客观评测结果输出步骤：将所述客观评测结果输出给所述用户；

所述客观评测模式包括：韵律评测模式、数字符号评测模式、多音字评测模式和分词词性评测模式；

韵律评测模式主要针对韵律层级，该模式以涵盖若干个测试集对TTS系统的前端系统进行韵律处理的评测，韵律测试集涵盖多个文本领域，每个领域包含多个测试文本，评测过程：用户通过下载测试集，利用待测评的语音合成系统生成前端结果，将该前端结果上传到服务器，服务器中的系统程序将用户上传的前端结果与评测答案进行比对，最终系统将TTS前端韵律处理的结果呈现给用户；

多音字评测模式涵盖100余个常用多音字的测试集对TTS前端系统进行多音字处理的评测，评测过程：用户下载测试集，利用待测评的语音合成系统生成前端结果，用户上传该前端结果与评测系统的评测答案进行比对，系统迅速得出正确率及问题点；

数字符号评测模式，数字符号测试集是涵盖多种类型的数字、符号及数字符号组合测试集，评测过程：用户通过下载测试集，生成前端结果，将前端结果上传后测评系统为用户呈现出评测结果；

分词词性评测模式中分词词性测试集是涵盖了一个或多个领域的测试集，测评系统中该模式的评测答案全面覆盖不同粒度的分词词性处理的正确结果，评测过程：用户通过下载测试集，生成前端处理结果并上传到评测系统，系统能够迅速计算正确率及错误点。

2.根据权利要求1所述的方法，其特征在于，该方法还包括主观评测步骤，所述主观评测步骤包括：

第四数据接收步骤：接收用户上传的第四数据，其中，所述第四数据是将至少一个测试集输入到待评测的语音合成系统后输出的第一语音合成结果；

主观评测结果生成步骤：接收用户对至少一个主观评测模式的选择并将选择的结果发送给评测人员，接收所述评测人员基于所述用户选择的主观评测模式对所述第四数据进行评测得到的主观评测结果；和

主观评测结果输出步骤：将所述主观评测结果输出给所述用户；

所述主观评测模式包括：语音质量对比评测模式和语音质量评分评测模式。

3.根据权利要求1所述的方法，其特征在于，该方法还包括综合评测步骤，所述综合评测步骤包括：

第五数据接收步骤：接收用户上传的第五数据，其中，所述第五数据是将所有的测试集输入到待评测的语音合成系统后输出的第二语音合成结果；

综合评测报告生成步骤：接收用户对综合评测模式的选择，从文本分析、韵律、声学参数和声码器方面对所述第二语音合成结果进行主观评测，对所述待评测的语音合成系统进行综合分析，形成综合评测报告；和

综合评测报告输出步骤：将所述综合评测报告输出给所述用户；

在综合评测步骤中，主要是评测人员对语音合成系统的结果进行评测，该步骤可以对合成测试集的样本进行深入分析，从韵律层级预测问题、文本分析问题、声学参数生成问题和声码器问题方面，对语音合成系统进行全面综合的剖析，形成评测报告，其中，文本分析包括多音字分析、数字符号分析及分词词性分析。