[发明专利]基于互联网的多平台信息交互系统

摘要

本发明公开了基于互联网的多平台信息交互系统。这种基于互联网的多平台信息交互系统功可以在识别出用户的命令后从云平台获取相应的内容呈现给用户；可以捕捉到用户的头像和声音信息，对其进一步分析可以得到用户的表情以及用户的语音命令，可以很好的对用户的表情和语音命令进行反馈，方便用户的使用；提高多模态人脸情绪识别的准确性，将多模态情绪、脸部属性与自然语言交互信息相结合，针对人脸多模态情感、人脸属性识别与人机交互应对规则的逻辑判断输出适切的回话内容，在多轮对话当中，提供使用者良好的体验功能。

主权项

1.基于互联网的多平台信息交互系统，包括多个设备终端（1）和云平台（2），其特征是：所述云平台（2）用于提供数据存储、大数据分析、视频存储、音频存储及后台服务；通过云平台（2），用户随时控制查看设备终端的状态，并能与设备终端（1）进行语音、视频通话，使用户随时随地利用该系统疏导自己的情绪；所述设备终端（1）包括控制模块（11）、环境传感器模块（12）、情绪模块（13）、电源模块（14）、摄像模块（15）、音响模块（16）、显示操作模块（17）、计算模块（18）及投影模块（19）：所述控制模块（11），用于通过所述环境传感器模块（12）及所述情绪模块（13）采集环境信息和/或用户的情绪信息，对采集到的环境信息和/或用户的情绪信息进行结构化预处理，并将结构化预处理后的信息传送到云平台（2）；所述电源模块，与所述控制模块（11）信号连接，用于为所述控制模块（11）提供能量；所述摄像模块（15），与所述控制模块（11）信号连接，用于依据人眼成像的原理采集用户的人脸图像信息，并将该头像信息传送到所述控制模块（11）；所述音响模块（16），与所述控制模块（11）信号连接，用于采集用户的声音信息，并将该声音信息传送到所述控制模块（11）；所述显示操作模块（17），与所述控制模块（11）信号连接，用于在该提取的关键字是采集情绪信息的指令时显示与该关键字对应的提示信息；所述计算模块（18），用于通过实时计算生成相应交互的人脸图像信息，并将所述画面传送到所述投影模块（19）进行展示；所述投影模块（19），连接所述控制模块（11），用于根据所述控制指令，展现所述人脸图像的三维投影效果。