[发明专利]一种基于VR多方向音源合成的实现方法

说明书

本发明公开了一种基于VR多方向音源合成的实现方法。它具体包括如下步骤：VR视频流由多个视频画面和多个音频组成，每个视频画面对应一个音频；多个视频画面在360度中呈均匀分布，播放器播放一个经过混音处理的播放音频；当眼睛正对着其中一个视频画面时，除了中视频的声音外，左耳朵能同时听见左视频的声音，右耳朵能同时听见右视频的声音；在中视频的情况下，当头左右移动时，左视频和右视频的音频音量发生相应的变化；当头移动到两个视频画面的中间位置处，分别抽取左视频和右视频各自的一个声道不做降音处理，然后把两个声道组成双声道的播放音频。本发明的有益效果是：随着移动角度的不同进行各自音源的音量调整及多音源合成。

技术领域

本发明涉及音视频处理相关技术领域，尤其是指一种基于VR多方向音源合成的实现方法。

背景技术

目前大多数VR视频都是单个视频源里单个视频画面，对应着单个音频。随着后面5G的普及，VR的应用方式也会呈现多样式。VR在360度中有多个视频画面及对应的多个音频，怎么随着角度的变化，合成多音源是现在需要解决的。

发明内容

本发明是为了克服现有技术中存在上述的不足，提供了一种能够随着角度不同合成多音源的基于VR多方向音源合成的实现方法。

为了实现上述目的，本发明采用以下技术方案：

一种基于VR多方向音源合成的实现方法，具体包括如下步骤：

(1)VR视频流由单个视频和多个音频组成，其中的单个视频中由多个视频画面组成，每个视频画面对应一个音频，音频指的是基于双声道和16位的音频；

(2)VR视频流中的多个视频画面在360度中呈均匀分布，播放器播放音频只能播放一个音频源，为了能同时播放多个音频，需要对VR视频流里的多音频进行混音处理，混音后的音频称为播放音频；

(3)当眼睛正对着其中一个视频画面时，除了中视频的声音外，左耳朵能同时听见左视频的声音，右耳朵能同时听见右视频的声音，但左右音频的音量是要比中间音频的音量低，因此需要对三个音频进行混音；

(4)在中视频的情况下，当头左右移动时，左视频和右视频的音频音量发生相应的变化；

(5)当头移动到两个视频画面的中间位置处，分别抽取左视频和右视频各自的一个声道不做降音处理，然后把两个声道组成双声道的播放音频。

通过本发明的上述方法设计解决了VR视频流由多个视频对应多个音频源时，随着移动角度的不同进行各自音源的音量调整及多音源合成。

作为优选，在步骤(3)中，对三个音频进行混音的方法如下：抽取左视频音频的一个声道进行降音处理，然后与中视频的音频左声道进行混音；抽取右视频音频的一个声道进行降音处理，然后与中视频的音频右声道进行混音；将两个混音后的单声道再组合成一个双声道作为播放音频；其中：左视频音频音量值和右视频音频音量值均采用默认音量值。其中：一个视频的左右两个声道数据是一样，拿其中一个声道出来混音效果都是一样的。

作为优选，在步骤(4)中，当头向左移动时，左视频的音频音量慢慢提高，右视频的音频音量慢慢降低，同时中视频的左声道音量慢慢降低，每移动达到一个设定的角度，则左视频的音频音量值加一个设定的音量值，右视频的音频音量和中视频的左声道音量减一个设定的音量值，中视频的右声道音量不变，混音方法与步骤(3)中的方法一致的；当头向右移动时与上述描述过程相反。

作为优选，在步骤(5)中，播放音频的左声道只播放左视频的音频，右声道只播放右视频的音频，且不需要对左视频的音频和右视频的音频进行降音。

本发明的有益效果是：解决了VR视频流由多个视频对应多个音频源时，随着移动角度的不同进行各自音源的音量调整及多音源合成。

附图说明

图1是本发明中VR视频流的示意图；