[发明专利]一种基于环境可视的智能人机交互系统

说明书

本发明属于人机交互技术领域，尤其为一种基于环境可视的智能人机交互系统，包括用户端、服务器端和医生终端，所述用户端和医生终端均通过无线网络与服务器端连接；所述用户端用于采集用户的视频和语音数据信息并通过网络传输给服务器端，还用于为用户播放音视频和进行语音视频通话。本发明能够对用户的语音和图像都进行采集然后综合分析，并且将语音转换为文字分析过程中，会将文字分为关键字进行单一分析，从而能够明确用户的含义，并且会用户的情绪进行分析，从而判断用户的情绪状态，来做出正确的答复和决策，能够使能使人与智能多媒体设备之间的交互更加智能，便捷交互方式更加的便捷快速。

技术领域

本发明涉及人机交互技术技术领域，具体为一种基于环境可视的智能人机交互系统。

背景技术

随着人工智能的不断发展，智能的人机交互系统也得到广泛的应用和普及，如苹果公司的“SIRI”、小米公司的“小爱同学”和目前正处发展研究的“AI”，都在不断的推荐人类的科技进步和改善人们的生活。

目前的人机交互系统还比较单一，如应用在多媒体智能电子产品上的人机交互，人可以解放双手，使用语言驱动的方式发出指令，从而控制手机做出相应的操作，同时智能手机还可以与人进行简单的文字答复，但是由于语言由于语音识别存在一定的误差以及口语交流过程中用户意图往往存在一定模糊性，人机自然语言交互是一种非精确的信息交互，因此多媒体智能电子产品无法对语言含义进行深刻的理解，从而无法做出正确的答复和决策，同时目前的人机交互过程中，只是对语言进行采集，而且没有对用户的情绪进行采集分析，因此做出的答复和决策的不完善。

发明内容

(一)解决的技术问题

针对现有技术的不足，本发明提供了一种基于环境可视的智能人机交互系统，解决了上述背景技术中提出的问题。

(二)技术方案

为实现上述目的，本发明提供如下技术方案：一种基于环境可视的智能人机交互系统，包括用户端、服务器端和医生终端，所述用户端和医生终端均通过无线网络与服务器端连接。

所述用户端用于采集用户的视频和语音数据信息并通过网络传输给服务器端，还用于为用户播放音视频和进行语音视频通话。

所述服务器端用于对用户端采集的数据信息进行分析和处理，并制定相应的解决方案，然后将解决方案反馈给用户端，还用于将用户端与医生终端进行连接。

所述医生终端用于将医生通过无线网络与用户端的用户进行语音视频沟通。

作为本发明的一种优选技术方案，所述用户端包括视频单元、语音单元、人机交互触摸显示单元、指纹登录单元和控制单元；

所述视频单元用于采集用户的视频；

所述语音单元用于采集用户的音频和播放音频；

所述人机交互触摸显示单元用于实现多媒体交互功能；

所述指纹登录单元用于采集用户指纹数据并传输到控制单元进行处理；

所述控制单元用于对视频采集单元、语音采集单元、人机交互触摸显示单元和指纹登录单元进行控制，获取视频单元、语音单元、人机交互触摸显示单元和指纹登录单元并分析和处理，并传输给服务器端，接收服务器端的反馈结果并进行处理。

作为本发明的一种优选技术方案，所述服务器端包括数据资源单元、语言处理单元、表情处理单元和沟通单元；

所述数据资源单元用于储存用户信息数据、文字数据库、表情数据库和音视频数据库；

所述语音处理单元用于对用户的语音进行处理并作出决策；

所述表情分析单元用于对用户的面部表情进行处理并作出决策；