[发明专利]VR游戏中实现3D角色口型语音聊天系统及方法在审
申请号: | 201711251238.1 | 申请日: | 2017-12-01 |
公开(公告)号: | CN107998658A | 公开(公告)日: | 2018-05-08 |
发明(设计)人: | 刘刚;田超 | 申请(专利权)人: | 苏州蜗牛数字科技股份有限公司 |
主分类号: | A63F13/52 | 分类号: | A63F13/52;A63F13/55;A63F13/87;A63F13/424 |
代理公司: | 北京德崇智捷知识产权代理有限公司 11467 | 代理人: | 王金双 |
地址: | 215000 江苏省*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | vr 游戏 实现 角色 口型 语音 聊天 系统 方法 | ||
1.一种VR游戏中实现3D角色表情口型语音聊天的系统,其特征在于,包括:
采集模块,其通过VR装置的语音输入设备采集原始音频数据;
编码模块,其用于对所述原始音频数据进行数据压缩编码处理;
传输模块,其将经过压缩编码处理的音频数据通过服务器转发给其他用户;
解码模块,其将接收到的压缩编码音频数据进行解压、解码,还原成原始音频数据;
虚拟用户角色口型变化模块,其根据原始音频数据,控制3D虚拟用户角色的口型实时变化;以及
播放模块,用于将原始音频数据输出至VR装置的播放设备。
2.根据权利要求1所述的VR游戏中实现3D角色表情口型语音聊天的系统,其特征在于,
所述虚拟用户角色口型变化模块,进一步包括:声贝模块和动画模块,
其中,
所述声贝模块,用于根据原始音频数据,计算出声贝的数值;
所述动画模块,其根据实时声贝数值的变化,驱动3D虚拟用户角色口型的每帧移动位置。
3.根据权利要求1或2所述的VR游戏中实现3D角色表情口型语音聊天的系统,其特征在于,所述系统,还包括:缩放模块,其中,
所述缩放模块,其根据3D虚拟用户的位置信息控制播放声音的大小。
4.根据权利要求3所述的VR游戏中实现3D角色表情口型语音聊天的系统,其特征在于,所述缩放模块,其根据3D虚拟用户的位置信息,通过预设的衰减模型算法计算和处理,控制播放声音的大小。
5.根据权利要求1或2所述的VR游戏中实现3D角色表情口型语音聊天的系统,其特征在于,
所述采集模块,其将VR装置的语音输入设备输入的模拟信号转换为原始PCM音频数据。
6.一种VR游戏中实现3D角色表情口型语音聊天的方法,包括:
采集原始音频数据;
将原始音频数据进行数据压缩编码处理;
将经过数据压缩编码处理的音频数据,通过网络传输到服务器,再通过服务器广播给VR游戏场景中所有的用户;
对数据压缩编码处理的音频数据进行解压、解码处理,还原为原始音频数据;
对原始音频数据进行数据处理,使3D虚拟用户角色的口型实时变化;以及
对音频数据进行语音播放。
7.根据权利要求6所述的VR游戏中实现3D角色表情口型语音聊天的方法,其特征在于,所述采集原始音频数据的步骤,进一步包括,
将VR装置的语音输入设备输入的模拟信号转换为原始PCM音频数据的步骤。
8.根据权利要求6所述的VR游戏中实现3D角色表情口型语音聊天的方法,其特征在于,所述原始音频数据进行数据处理,使3D虚拟用户角色的口型实时变化的步骤,进一步包括,
将解码后的原始音频数据拆分为声道数据,针对每个声道数据进行采样运算后,做加权平均运算出一个数值的步骤;以及
采用变形目标动画方式,在客户端每帧渲染的过程中通过转换的具体数值,调整3D虚拟用户角色嘴上的变形目标数值实现声音驱动口型大小变化的步骤。
9.根据权利要求6所述的VR游戏中实现3D角色表情口型语音聊天的方法,其特征在于,在所述对音频数据进行语音播放的步骤之前,还包括:采用虚幻引擎的衰减系统调整距离算法参数,通过设置有效半径进行自然衰减模拟,对音频数据进行3D语音距离缩放的步骤。
10.根据权利要求6所述VR游戏中实现3D角色表情口型语音聊天的方法,其特征在于,所述将原始音频数据进行数据压缩编码处理的步骤,包括,对原始音频数据采用AAC音频编码方式。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州蜗牛数字科技股份有限公司,未经苏州蜗牛数字科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711251238.1/1.html,转载请声明来源钻瓜专利网。