[发明专利]虚拟现实VR音频信号的处理方法及相应设备

说明书

本发明提供了一种虚拟现实VR音频信号的处理方法及相应设备，该方法包括：获取VR音频信号对应的冗余运动信息；根据所述冗余运动信息，对所述VR音频信号进行调整处理。本发明与现有技术相比，能够根据获取到的VR音频信号对应的冗余运动信息，对VR音频信号进行调整处理，从而消除冗余运动对VR音频信号的影响，提升VR音频信号的稳定性和准确性。

技术领域

本发明涉及虚拟现实VR音频技术领域，具体而言，涉及一种虚拟现实VR音频信号的处理方法及相应设备。

背景技术

随着人们对VR(Virtual Reality，虚拟现实)产品的关注，许多公司和组织都专注于发展VR技术。VR音频是VR领域中的一个关键技术，VR音频能够为用户提供带有空间分辨率的听觉内容，如图1所示，将VR应用的音频信号完美地与真实场景融合在一起，使用户能够有身临其境的VR体验。

随着VR技术的不断发展，VR音视频的录制和分享，也成为了VR市场中非常重要的一环。VR摄像机的出现，为更为逼真的音视频的捕捉和重现提供了可能。VR摄像机采用三维全景技术，通过图像拼接可以生成虚拟现实场景。

区别于传统的二维影像技术，由于VR引入了第三个维度的位置信息，音画的一致性对VR音视频会产生极大的影响。为了更好的实现VR音视频重放时的沉浸感，VR音频与图像的同步显得尤为重要。

在传统的二维音视频录制过程中，如果发生无意义的抖动，在后续观看录制的音视频时，用户会看到抖动的画面，可能会感到不适，因此图像防抖是二维相机的一个重要功能。但是由于目前的二维音视频录制设备大多都是单声道立体声，没有第三个维度的位置信息，因此由抖动引起的声音位置失真对用户的影响并不大，现有一般不会对二维的音频进行防抖考虑。由于录制过程中的抖动对录制的内容是无意义的，因此可以将上述抖动称为冗余运动。

但是在三维音视频内容的录制过程中(如用户手握VR录制设备录制VR内容)，如果发生抖动，如图2所示，当重放录制的三维音视频时，由于VR引入了第三个维度的位置信息，抖动的音频会给用户带来严重的不适，因此需要考虑三维音频的防抖处理。但是现在并没有提出一种有效的对录制三维音频时的抖动进行处理的方式，这就使得用户在收听录制的三维音频内容时的体验较差。

除了录制三维音频时的抖动之外，用户在佩戴VR播放设备观看VR内容时，可能会在真实场景中产生运动，如用户处于运动状态(如跑步或走路)，或者用户处于运动状态的交通工具中(如用户坐在行驶中的汽车或船上)。VR播放设备播放VR内容时，会将上述用户的移动作为VR的播放操作指令，根据用户的移动调整VR播放的内容，但是上述用户的移动实际上并不是要操控VR内容的播放，针对播放VR内容来说，属于无意义的运动，也可以将上述运动称为冗余运动。

由于用户的上述冗余运动，将导致播放的VR音频不断发生抖动，这会给用户带来严重的不适。

发明内容

为克服上述技术问题或者至少部分地解决上述技术问题，特提出以下技术方案：

本发明的实施例提出了一种虚拟现实VR音频信号的处理方法，包括：

获取VR音频信号对应的冗余运动信息；

根据所述冗余运动信息，对所述VR音频信号进行调整处理。

其中，冗余运动信息包括：采集VR音频时的冗余运动信息或播放VR音频时的冗余运动信息；

根据所述冗余运动信息，对所述VR音频信号进行调整处理，包括：

根据采集VR音频时的冗余运动信息，对采集的VR音频信号进行调整处理；或，

根据播放VR音频时的冗余运动信息，对待播放的VR音频信号进行调整处理。

具体地，获取VR音频信号对应的冗余运动信息，包括：