[发明专利]一种基于文本及语音识别的口语测评方法及系统在审
申请号: | 202210402853.2 | 申请日: | 2022-04-18 |
公开(公告)号: | CN114842875A | 公开(公告)日: | 2022-08-02 |
发明(设计)人: | 郭松柳;刘宝泉;张小平;李铭晖 | 申请(专利权)人: | 上海清华国际创新中心 |
主分类号: | G10L25/51 | 分类号: | G10L25/51;G10L15/26;G09B19/06 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 马泽伟 |
地址: | 200062 上海*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 文本 语音 识别 口语 测评 方法 系统 | ||
1.一种基于文本及语音识别的口语测评方法,其特征在于,所述口语测评方法包括:
获取待测评用户的阅读语音、自由陈述语音、所述阅读语音对应的阅读文本以及所述自由陈述语音对应的自由陈述文本;所述阅读语音为所述待测评用户阅读标准测评文本的语音,所述自由陈述语音为所述待测评用户针对测评题目进行自由陈述的语音;
基于所述阅读语音和阅读文本,确定阅读部分的第一测评分数,基于所述自由陈述语音和自由陈述文本,确定自由陈述部分的第二测评分数;所述第一测评分数和第二测评分数均是由多个评分维度下的测评子分数构成的;不同评分维度用于代表待测评用户不同方面的口语能力;
基于第一测评分数和第二测评分数,确定第一测评分差和每个评分维度下的第二测评分差;所述第一测评分差为第一测评分数和第二测评分数的分数差值;
当所述第一测评分差大于第一阈值分数或任一第二测评分差大于第二阈值分数时,根据第一测评分数和第二测评分数,从口语测评数据库中查询满足预设要求的口语测评分数,并确定所述口语测评分数所对应的目标用户;
通过所述目标用户所使用的口语测评系统分别对待测评用户的阅读语音和自由陈述语音进行重新评分,获得待测评用户的第三测评分数和第四测评分数;所述阅读语音为所述阅读文本进行语音文本转换前所对应的语音,所述自由陈述语音为所述自由陈述文本进行语音文本转换前所对应的语音;
基于所述待测评用户的第一测评分数、第二测评分数、第三测评分数以及第四测评分数,确定待测评用户的最终口语测评分数。
2.根据权利要求1所述的口语测评方法,其特征在于,通过以下步骤确定待测评用户的第二测评分数以及所述第二测评分数包括的每个评分维度下的测评子分数:
对所述自由陈述文本进行初测评,确定自由陈述文本包括的每个赋分段落的参考分数;
分别对每个赋分段落进行测评特征提取,确定每个赋分段落包括的多种测评特征的测评参数;
针对于每个赋分段落,基于该赋分段落包括的多种测评特征的测评参数、该赋分段落所对应的部分自由陈述语音、每个评分维度下的初始评分权重以及该赋分段落的参考分数,确定该赋分段落在每个评分维度下的初始段落测评分数;
针对于每个赋分段落,分别基于该赋分段落包括的每种测评特征的测评参数,对对应评分维度下的初始评分权重进行调整,确定每个评分维度的目标评分权重;
针对于每个赋分段落,基于该赋分段落在每个评分维度下的初始段落测评分数、每个评分维度下的初始评分权重以及目标评分权重,确定该赋分段落在每个评分维度下的目标段落测评分数;
基于每个赋分段落在每个评分维度下的目标段落测评分数,确定待测评用户的第二测评分数以及所述第二测评分数包括的每个评分维度下的测评子分数。
3.根据权利要求2所述的口语测评方法,其特征在于,所述评分维度包括以下至少一个:可辨识度、语气、流利度以及音准。
4.根据权利要求3所述的口语测评方法,其特征在于,所述测评特征包括以下至少一种:文本事件数量、回答内容与题目主题的相关度、词向量个数和词汇重音节个数。
5.根据权利要求4所述的口语测评方法,其特征在于,所述针对于每个赋分段落,分别基于该赋分段落包括的每种测评特征的测评参数,对对应评分维度下的初始评分权重进行调整,确定每个评分维度的目标评分权重,包括:
基于该赋分段落包括的文本事件数量以及文本事件数量与权重的映射关系,对可辨识度的初始评分权重进行调整,确定可辨识度的目标评分权重;
基于该赋分段落的回答内容与题目主题的相关度以及相关度与权重的映射关系,对语气的初始评分权重进行调整,确定语气的目标评分权重;
基于该赋分段落包括的词向量个数以及词向量个数与权重的映射关系,对流利度的初始评分权重进行调整,确定流利度的目标评分权重;
基于该赋分段落包括的词汇重音节个数以及词汇重音节个数与权重的映射关系,对音准的初始评分权重进行调整,确定音准的目标评分权重。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海清华国际创新中心,未经上海清华国际创新中心许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210402853.2/1.html,转载请声明来源钻瓜专利网。