[发明专利]基于虚拟现实环境的具有情感功能的语音交互系统及方法

摘要

本发明提供一种基于虚拟现实环境的具有情感功能的语音交互系统及方法，包括语音移动终端、虚拟环境终端、外部服务器，通过语音移动终端采集用户语音并进行处理，从而得到用户语音信息是控制命令或者语音交流信息，并发送至虚拟环境终端，进行相应的控制操作以及相应的情感、动作显示和语音播放，从而虚拟用户的在现实环境中的多人交流，本发明的功能脱离了对手柄的依赖，而且操控功能数量不受按键影响，操作简单，并且通过用户语音控制系统的操作，另外，通过从用户语音信息中提取用户出用户的情绪、动作信息，从而虚拟用户在现实环境中多人游戏或应用中相互交流和表达自己情感，真正实现情感交流，进一步提高了用户在虚拟环境中的体验效果。

主权项

一种基于虚拟现实环境的具有情感功能的语音交互系统，其特征在于：包括语音移动终端、虚拟环境终端、外部服务器，所述外部服务器分别与语音移动终端、虚拟环境终端通讯连接，所述语音移动终端与虚拟环境终端通讯连接；所述语音移动终端包括语音采集模块，用于采集用户的语音信号，并对采集的语音信号进行预处理；语音识别模块，用于将预处理的语音信号转化为文本信息，并将文本信息生成相应的控制命令和参数；语音情感特征参数提取模块，用于提取语音采集模块预处理后的语音信号中具有情感特征的参数；存储模块，用于存储从外部服务器加载更新的语音识别数据、语音控制命令数据库和语音情感数据库；无线通信模块，用于将识别出的控制命令和参数或者语音文本信息和对应的语音情感发送至虚拟环境终端，以及用于与外部服务器通讯连接，从而将外部服务器中相应的数据包加载更新到存储模块中；处理器，用于处理采集的用户语音信息、或者发送更新命令至外部服务器加载更新存储模块储存的数据；所述处理器分别与语音采集模块、语音识别模块、语音情感特征参数提取模块、存储模块、无线通信模块连接；所述语音采集模块分别与语音识别模块、语音情感特征参数提取模块连接，语音情感特征参数提取模块提取出来的情感特征分别与对应的语音识别模块识别出来的语音文本信息相映射；所述存储模块分别与语音识别模块和语音情感特征参数提取模块连接；所述虚拟环境终端包括存储单元，用于存储从外部服务器加载更新的虚拟人物情感表情和动作的模型库、语音情感对应的语调和语速数据库；语音播放模块，用于播放接收到的语音文本信息；显示模块，用于展示虚拟人物语音表达的情感表情和动作；通信模块，用来与语音移动终端通信，以及与外部服务器通讯连接，从而将外部服务器中相应的数据包加载更新到存储单元中；所述存储单元分别与语音播放模块、显示模块连接。