[发明专利]具有语音功能的3D虚拟教师系统及其方法

说明书

技术领域

本发明涉及数字化教学和人工智能领域，尤其涉及一种具有语音功能的3D虚拟教师系统及其方法。

背景技术

国内有关虚拟教师问题的研究始于2006年前后，其概念及研究内容随着研究的开展发生了巨大的变化。在现实的学校教育中，学生对教师的选择是有限的，教师的外在形象也是固定的。然而在虚拟世界中则大相径庭，学生可以选择喜爱的虚拟教师，由学生自主选择教师的形象，研究表明，由学生喜爱的教师授课，往往更能激发学生的学习兴趣。

目前，数字化教学常见的是没有虚拟教师形象的学习系统，该系统一般具有教学、答疑、布置作业和测验等功能。具有语音功能和3D形象的虚拟教师正处于研究阶段。

随着语音识别技术的发展，语音自动答疑的研究也发展起来，目前语音自动答疑方面苹果语音助理服务Siri可以语音解答使用苹果手机的问题，百度的移动解题类App“作业帮”具有了“语音答疑”的功能。用于英语教学的虚拟教师具有语音功能，学习者可以向虚拟教师说话，但这种语音交流只能用于特定部分，如：测试(Quiz)。国内外对自动答疑的研究已经有十多年了，其关键技术是关键字的提取、全文搜索技术及知识库的构建，由于传统的关键字匹配技术没有理解查询词背后的语义信息，存在查询效率低、准确度不够的问题。

3D动画又称为三维动画，是随着计算机硬件和软件发展而产生的一门新兴技术。三维动画技术对真实物体的运动状态的虚拟模拟具有精确、真实和无限可能性。目前常用得3D工具有Maya、3ds Max等，运用这些工具可以制作出各种惟妙惟肖的人物和场景，也可通过程序控制人物的动作。但目前还没有将情感词触发3D虚拟人物的情感合成，目前带有教师头像的虚拟教师始终只能保持一种表情。

人性化交互功能的虚拟教师引入现有的虚拟学习环境中来，可以帮助学习者更好地完成学习任务，在快乐中学习，学习者在感受到利用网络进行学习的充实感的同时，拥有教师形象的虚拟教师又可以使学生摆脱以往利用网络学习的孤独感，有接受正规学校教育的感觉。相信随着技术的进步和人们对于网络学习观念的更新，伴有教师形象的虚拟学习环境的利用率会越来越高，各类课程学习平台会使成千上万的学习者受益。

发明内容

本发明的目的是提供一种具有语音功能的3D虚拟教师系统及其方法，即提供一种能模拟真实教师的外貌、形象、动作以及表情等的3D虚拟教师，并能够向学习者授课和自动答疑的智能实体，解决目前在线学习时缺少互动、缺乏情感的交流、疑问不能及时解答、容易产生孤独感、不易对学习保持长久热情和教学效果差的问题。

本发明的目的是这样实现的：

本发明以3D动画的形式和模拟虚拟教师情感的方式实现网络教学过程中的智能答疑和在线学习；通过语音识别技术将用户提出的问题识别为短文本，将短文本分词，通过课程知识图谱，匹配出文本形式的答案，最后通过语音生成器生成语音回答；同时虚拟讲课时根据课程内容合成不同表情和动作处理；答疑时对用户提问信息进行分析，对积极提问和消极提问分别合成不同的表情；本发明可用于大、中、小学生不同课程的教学中，也可用于其他类型的教学中。

一、具有语音功能的3D虚拟教师系统(简称系统)

本系统包括现有的因特网网络和客户终端，客户终端包括第1客户终端、第2客户终端……和第N客户终端，N为自然数，1≤N≤1000000；

设置有3D虚拟教师服务器；

3D虚拟教师服务器、因特网网络和客户终端依次连通；

用户打开本系统，本系统通过因特网网络登陆到3D虚拟教师服务器。

本发明的工作原理是：

①借助语音识别技术将用户语音提出的问题识别为文本，对文本进行取词根、标注词性处理，设计短文本相似度计算方法计算问题与课程答案库中答案的相似度，相似度最高的文本形式答案被找出来，最后通过语音生成器生成语音回答；

②通过学习者提问内容分析将提问内容表示成关键词向量，通过相似度度量，得出潜在的具有相似性的学习内容，将有效学习内容信息推荐给学习者；

③虚拟教师情感是通过计算机3D工具呈现的，首先构建3D虚拟教师情感空间，对虚拟教师进行情感的数据量化，包括面部表情、身体姿态、头部姿势、手势、运动和物体操作，然后构建3D虚拟教师情感转移矩阵，设计情感的更新规则，包括不同程度的负面影响和正面影响，虚拟教师的情感变化根据这些规则更新。

二、具有语音功能的3D虚拟教师方法(简称方法)

本方法包括以下两种：

1、智能语音自动答疑