[发明专利]一种虚拟即时通信方法

说明书

本发明公开了一种虚拟即时通信方法，通过终端摄像头实时捕获面部图像或特征，并与在该时间段内终端录音设备捕获到的声音一起打包发送到服务器，服务器处理后发送到另一个通信终端，该终端会根据接收到的面部图像或特征实时驱动虚拟2D/3D形象模型。本发明通过对面部图像或特征与声音进行打包传输，实现声音数据与表情数据的同步。在虚拟即时通信的过程中，使用与双方表情、姿态相同的虚拟2D/3D形象模型代替通信双方的真实面貌，以此来保护用户的隐私，同时也能增加即时通信的趣味性。

技术领域

本发明属于计算机技术领域，具体涉及一种虚拟即时通信方法，应用于即时通信、视频聊天。

背景技术

心理学家研究发现，人类进行会话交流传递信息时，言语内容占7％，说话时的语调占38％，而说话人的表情占55％，由此可见，在人类交流过程中，面部表情是必不可少的一个要素。

在即时通信的方式中，视频聊天是最能够准确的表达通信双方意思的方式，但是，出于隐私或其他方面的考虑，很多人并不想将真实的面容展示给通信方，目前市面上没有针对这一问题的解决方案。那么在即时视频通信的过程中如何在展示面部表情的同时保护用户的隐私是本发明需要解决的第一个问题。

目前市面上的视频即时通信软件(例如QQ的视频聊天)，在视频过程中包含很多2D挂件来增添视频的趣味性(例如实时定位到人脸的眼睛，在眼睛位置绘制2D的眼镜贴图)，虽然在一定程度上能够吸引用户，但是在当今这个3D应用/游戏、虚拟现实与增强现实日益普及的时代，单纯的2D挂件已经不足以满足用户的娱乐需求。那么在即时视频通信的过程中采用一种更加具有趣味性的方式是本发明需要解决的第二个问题。

发明内容

本发明的目的是通过以下技术方案实现的。

针对上述现有技术的缺点，本发明能够采用一种虚拟即时通信方法实现高趣味性并且能够保护用户隐私的视频即时通信。

具体的，根据本发明的第一个方面，本发明提供了一种虚拟即时通信方法，包括：

第一用户通过第一客户端选择或实时生成代表第一用户的虚拟2D/3D形象模型，并发起对第二用户的会话；

第二用户接受第一用户的会话请求，与第一用户建立会话连接，连接后，代表双方的虚拟2D/3D形象模型将会在通信的另一方呈现，第二用户可以提前设置或实时生成代表第二用户的虚拟2D/3D形象模型；

第一客户端、第二客户端分别通过各自设备的摄像头实时捕获各自用户(即第一用户、第二用户)的面部图像或特征；

第一客户端、第二客户端分别录制各自用户发出的声音，将同一时刻的声音与面部图像或特征打包，发送到对方客户端，实现声音与表情的同步；

第一客户端接收第二客户端发送的数据包，根据数据播放第二用户的声音并操纵代表第二用户的虚拟2D/3D形象模型做出对应表情；第二客户端接收第一客户端发送的数据包，根据数据播放第一用户的声音并操纵代表第一用户的虚拟2D/3D形象模型做出对应表情。

优选的，所述第一用户通过第一客户端选择或实时生成代表第一用户的虚拟2D/3D形象模型，包括：

如果第一用户选择自行上传代表第一用户的虚拟2D/3D形象模型，第一用户在第一客户端将含有表情动画的虚拟2D/3D形象模型上传到服务器进行有效性验证；如果第一用户上传的虚拟2D/3D形象模型通过了有效性验证，用户则能够使用该虚拟2D/3D形象模型实时模拟第一用户的面部表情，否则服务器向第一客户端发送与该错误信息相对应的提示信息，提示第一用户上传失败；