[发明专利]会话式人机交互口语测评系统

权利要求书

1.一种会话式人机交互口语测评系统，其特征在于包括对话系统和测评系统，所述对话系统包括：

语音识别模块，所述语音识别模块被配置为能够识别学生用户的语音输入并转换成文本；

意图理解模块，所述意图理解模块被配置为能够结合用户画像和场景化信息对转换后的文本进行语义理解，以识别所述学生用户在口语对话中的用户意图，所述用户画像包括用户的口语水平维度，所述场景化信息包括当前对话发生的虚拟场景；

对话管理模块，所述对话管理模块被配置为能够基于所述意图理解模块的理解结果进行相应的语音回应；

语言生成模块，所述语言生成模块被配置为能够将所述对话管理模块产生的系统动作转化为自然语言；以及

语言合成模块，所述语言合成模块被配置为能够将自然语言转换成语音，并反馈给所述学生用户；

所述测评系统被配置为能够对转换后的文本进行多维度的测评，并根据测评结果更新所述用户画像；以及

所述对话管理模块进一步被配置为能够基于所述测评系统的测评结果和所述意图理解模块的理解结果，结合测评目标和对话策略而使得虚拟人对所述学生用户进行相应的语音回应以保持会话继续进行；

其中，所述对话管理模块包括对话状态跟踪模块和对话策略学习模块，当所述学生用户的回应超出了所述意图理解模块能够理解的范围时，所述对话状态跟踪模块根据当前整个对话所处阶段并融合对话过程的上下文信息表征当前对话状态，对话策略学习模块根据所述当前对话状态采用通用回应策略并通过虚拟人回应通用语句来保持会话继续进行。

2.根据权利要求1所述的会话式人机交互口语测评系统，其特征在于：

所述意图理解模块进一步被配置为能够进行槽位填充，通过用户表述提取槽位以理解用户语音并决定下一个对话的内容，其中，所述槽位是在对话过程中将所述用户意图转化为明确的用户指令所需要补全的信息。

3.根据权利要求1所述的会话式人机交互口语测评系统，其特征在于：

所述对话管理模块还包括对话状态跟踪模块，所述对话状态跟踪模块被配置为能够表示对话所处的阶段，并融合对话过程的上下文信息。

4.根据权利要求1所述的会话式人机交互口语测评系统，其特征在于：

所述对话管理模块还包括对话策略学习模块，所述对话策略学习模块被配置为能够根据当前的对话状态，生成系统的下一步操作。

5.根据权利要求1所述的会话式人机交互口语测评系统，其特征在于还包括测评系统，所述测评系统包括：

情景对话语音和语义评测模块，所述情景对话语音和语义评测模块被配置为能够根据语音和语义的标准内容，对用户语音转换成的文本进行相似度对比，并得到语音测评得分和语义测评得分；

语法评测和错误检查模块，所述语法评测和错误检查模块被配置为能够对用户语音转换成的文本进行语法检查，并得到语法测评得分；以及

易混音评测模块，所述易混音评测模块被配置为能够对用户语音转换成的文本标示出易混音的错误，以进行易混音的测评。

6.根据权利要求5所述的会话式人机交互口语测评系统，其特征在于：

所述对话管理模块进一步被配置为能够根据所述测评系统的测评结果产生相应的系统动作。

7.根据权利要求5所述的会话式人机交互口语测评系统，其特征在于：

当用户语音和标准语音音素的相似度越高，所述语音测评得分越高；以及

当用户表达的内容和对比参考答案的相似度越高，所述语义测评得分越高。

8.根据权利要求5所述的会话式人机交互口语测评系统，其特征在于：

所述语法评测和错误检查模块进一步被配置为能够考察句子中的逻辑关系，所述逻辑关系包括以下一种或多种关系：主谓搭配、时态表达、句法结构、单复数。

9.根据前述权利要求中任一项所述的会话式人机交互口语测评系统，其特征在于：

所述会话式人机交互口语测评系统是基于单机和/或在线配置的计算机系统，以开展语言类内容的测评。