[发明专利]虚拟现实社交实现系统

摘要

本发明揭示了一种虚拟现实社交实现系统，包括社交环境搭建装置与社交细节实现装置，社交环境搭建装置用以实现脸部表情及嘴型实时追踪与重现以及人脸3D模型构建，并通过实时追踪用户的头、手和身体躯干的动作和位置并呈现在虚拟现实的社交场景中，同时构建使用者的身体模型，并对场景进行真实环境的还原和重建；社交细节实现装置通过感测眼睛的注视焦点的位置，并根据使用者说话的语气、语句内容、语调和音量等来真实地呈现使用者说话时的嘴型动画，同时通过展现头部的动作和手部的动作及对方的动作姿势以增强用户虚拟现实社交时的真实感。

主权项

1.一种虚拟现实社交实现系统，包括社交环境搭建装置与社交细节实现装置，其中社交环境搭建装置包括脸部模型构建单元、动作捕捉与互动单元、身体模型重建单元及真实环境还原单元，社交细节实现装置包括眼神交流再现单元、嘴型重现单元、肢体动作展现单元以及用户姿势判断单元，其中脸部模型构建单元用以实现脸部表情实时追踪与重现、嘴型实时追踪与重现以及人脸3D模型的构建，动作捕捉与互动单元通过实时追踪用户的头、手和身体躯干的动作和位置，并相应地呈现在虚拟现实的社交场景中，身体模型重建单元用以构建使用者的身体模型，真实环境还原单元用以对场景进行真实环境的还原和重建，以令使用户更真实地沉浸在虚拟现实的社交场景中；眼神交流再现单元用以感测眼睛的注视焦点的位置，嘴型重现单元用以根据使用者说话的语气、语句内容、语调和音量来真实地呈现使用者说话时的嘴型动画，肢体动作展现单元用以通过展现头部的动作和手部的动作来增强用户虚拟现实社交时的真实感，动作姿势判断单元用以判断对方的动作姿势，身体模型重建单元用以构建使用者的身体模型，当用户进入虚拟现实世界开始社交之前，需要提交自己的身体模型数据，这个身体模型是由多台相机包围一个人物做三维扫描来实现，其中身体模型数据由三个部分构成：身体参数、基本属性以及附属，身体参数包括身高、体重、提醒、肤色以及毛发元素，基本属性包括人种、性别和年龄元素，附属包括服饰、发型和纹身元素。