[发明专利]音视频处理方法、装置及电子设备

权利要求书

1.一种用于直播的音视频处理方法，包括：

获取与直播操作有关的用户音频；

获取与所述直播操作有关的操作音频和操作视频；

对所述用户音频与所述操作音频进行混音以获得混合音频；以及

将所述混合音频与所述操作视频进行混合并进行所述操作视频的画面渲染以获得用于直播的多媒体数据。

2.根据权利要求1所述的用于直播的音视频处理方法，其中，获取与直播操作有关的用户音频包括：

从终端设备获取与所述直播操作有关的已编码的用户音频，所述已编码的用户音频通过对使用麦克风采集到的所述用户的声音进行编码得到。

3.根据权利要求1所述的用于直播的音视频处理方法，进一步包括：

从所述终端设备获取音频处理和/或视频处理的参数。

4.根据权利要求3所述的用于直播的音视频处理方法，其中，

所述音频处理的参数包括音频的采样率、声道、比特率中的至少一个；

所述视频处理的参数包括视频的分辨率、帧率、码率、关键帧时间间隔中的至少一个。

5.根据权利要求1所述的用于直播的音视频处理方法，进一步包括：

从所述终端设备采集与所述直播操作有关的用户视频。

6.根据权利要求1所述的用于直播的音视频处理方法，其中，获取与所述直播操作有关的操作音频和操作视频包括：

获取与所述直播操作有关的弹幕视频以作为所述操作视频的至少一部分。

7.根据权利要求1所述的用于直播的音视频处理方法，其中，获取与所述直播操作有关的操作音频和操作视频包括：

获取预先准备的已有操作音频和操作视频以作为与所述直播操作有关的操作音频和操作视频。

8.根据权利要求4所述的用于直播的音视频处理方法，其中，对所述用户音频与所述操作音频进行混音以获得混合音频包括：

对所述用户音频与所述操作音频进行混音；以及

对混音后的音频按照所述音频处理的参数进行编码以获得混合音频。

9.根据权利要求4所述的用于直播的音视频处理方法，其中，对所述用户音频与所述操作音频进行混音以获得混合音频包括：

从所述终端设备接收所述用户音频的第一音量和所述操作音频的第二音量；以及

按照所述第一音量和所述第二音频对所述用户音频与所述操作音频进行混音以获得混合音频。

10.根据权利要求4所述的用于直播的音视频处理方法，其中，将所述混合音频与所述操作视频进行混合并进行所述操作视频的画面渲染以获得用于直播的多媒体数据包括：

对所述操作视频按照所述视频处理的参数进行视频流编码。

11.根据权利要求10所述的用于直播的音视频处理方法，其中，将所述混合音频与所述操作视频进行混合并进行所述操作视频的画面渲染以获得用于直播的多媒体数据包括：

将所述混合音频和所述编码的视频流进行同步以获得所述用于直播的多媒体数据。

12.根据权利要求5所述的用于直播的音视频处理方法，其中，将所述混合音频与所述操作视频进行混合并进行所述操作视频的画面渲染以获得用于直播的多媒体数据包括：

将所述操作视频与所述用户视频进行同步以获得混合视频；以及

将所述混合视频进行画面渲染并与所述混合音频同步以获得用于直播的多媒体数据。

13.根据权利要求12所述的用于直播的音视频处理方法，其中，将所述操作视频与所述用户视频进行同步以获得混合视频包括：

根据经验将所述操作视频与所述用户视频进行同步；或者

对所述操作视频与所述用户视频进行视频识别并基于所述视频识别的结果将所述操作视频与所述用户视频同步。