[发明专利]结合5G、表情跟踪与美颜的VR实时通讯交互系统及方法

权利要求书

1.一种结合5G、表情跟踪与美颜的VR实时通讯交互系统，设有云端服务器、多个集群处理装置、多个通讯室和多个用户交互装置，云端服务器分别与多个集群处理装置连接，每个集群处理装置分别与邻近的多个用户交互装置连接，从而形成多个区域处理站，每个用户交互装置设置在相应的通讯室内，其特征在于，所述用户交互装置包括第一图像采集装置、用户处理器、头戴式VR交互装置以及第一通信模块，所述用户处理器分别与第一图像采集装置、第一通信模块连接，第一通信模块还与集群处理装置连接，用户处理器通过第一通信模块与集群处理装置进行数据传输；

所述头戴式VR交互装置设有显示装置、第二图像采集装置、微电极片和第二通信模块，所述微电极片、显示装置、第二图像采集装置分别与第二通信模块连接，所述第二通信模块还与第一通信模块连接无线连接；

所述微电极片用于采集EOG信号；

所述第一图像采集装置用于采集包含用户肢体的环境图像，所述第二图像采集装置用于采集用户面部图像，所述第二图像采集装置设置在头戴式VR交互装置上；

所述用户处理器用于创建通用身体模型和面部模型，识别用户的姿态、表情得到姿态跟踪信息、表情识别类型，所述姿态信息包括头部姿态信息、手部姿态信息以及肢体姿态信息；

所述云端服务器用于转发数据，对环境场景模型、用户模拟模型进行预搭建；

所述显示装置用于展示环境场景模型和用户模拟模型；

与通信方连接的集群处理装置根据姿态跟踪信息、表情识别类型对用户模拟模型进行更新用户模拟模型的姿态和表情。

2.根据权利要求1所述的结合5G、表情跟踪与美颜的VR实时通讯交互系统，其特征在于，所述云端服务器用于匹配与当前用户建立连接的通信方，所述通信方为与当前用户已建立通信交互的一个或任意多个通信用户；

所述用户处理器接收用户输入的预设环境场景类型，通过集群处理装置转发至云端服务器，所述云端服务器存储有多个预设环境场景类型，所述云端服务器根据用户通过用户处理器选择的预设环境场景类型生成环境场景模型，匹配与当前用户建立连接的通信方，将环境场景模型、用户模拟模型、姿态跟踪信息、表情识别类型发送至与通信方连接的集群处理装置。

3.根据权利要求1所述的结合5G、表情跟踪与美颜的VR实时通讯交互系统，其特征在于，所述用户交互装置还包括激光传感器，所述激光传感器设置在通讯室内，所述激光传感器与用户处理器连接；

所述激光传感器用于定位通讯室内用户所在的位置，所述用户处理器通过激光传感器获取用户位置，通过第一通信模块将用户位置通过集群处理装置传输至云端服务器，云端服务器将用户位置转发至与通信方连接的集群处理装置，该通信方为与当前用户已建立通信交互的一个或任意多个通信用户，与通信方连接的集群处理装置根据用户位置更新用户模拟模型在环境场景模型的相对位置，并将位置更新信息发送至通信方的用户处理器。

4.根据权利要求3所述的结合5G、表情跟踪与美颜的VR实时通讯交互系统，其特征在于，所述用户交互装置还包括感光传感器、激光灯塔基站、感应手柄，激光灯塔基站设置在用户交互装置的对角线两端，在激光灯塔基站内设有用于定位的激光传感器阵列，感光传感器设置在通讯室的地面和感应手柄，从而激光传感器阵列与感光传感器构成激光灯塔激光定位系统。

5.根据权利要求1所述的结合5G、表情跟踪与美颜的VR实时通讯交互系统，其特征在于，所述用户交互装置还包括环境光传感器，所述环境光传感器设置在通讯室内，所述环境光传感器与用户处理器连接；

所述环境光传感器用于感知通讯室内用户周围的光线情况，所述用户处理器利用环境光传感器获取用户环境光线信息，通过第一通信模块将用户环境光线信息通过集群处理装置传输至云端服务器，云端服务器将用户环境光线信息转发至与通信方连接的集群处理装置，该通信方为与当前用户已建立通信交互的一个或任意多个通信用户，所述通信方的用户处理器根据用户环境光线信息调节环境场景模型的显示亮度。