[发明专利]辅助直播的音视频处理方法及装置

权利要求书

1.一种辅助直播的音视频处理方法，其特征在于，包括：

通过辅助直播音视频应用读取原始视频流和原始音频流，其中，所述辅助直播音视频应用包括应用程序层、多媒体接口层和多媒体服务层；

对原始视频流进行处理，得到视频流；对原始音频流进行处理，得到音频流；包括：通过所述应用程序层接收用户的视频处理指令，并将所述视频处理指令通过所述多媒体接口层传输至所述多媒体服务层，通过所述多媒体服务层将所述原始视频流转化为帧数据，根据所述视频处理指令对所述帧数据进行处理，将处理后的帧数据重新组装成视频流；通过所述应用程序层接收用户的音频处理指令，并将所述音频处理指令通过所述多媒体接口层传输至所述多媒体服务层；根据所述音频处理指令对所述原始音频流进行处理，得到音频流；

通过所述辅助直播音视频应用对齐所述视频流和音频流的时间戳，生成包含对齐后的视频流和音频流的音视频流数据包；

连通所述辅助直播音视频应用与直播应用的跨进程通信通道，其中，所述跨进程通信通道表示进程间进行数据交换的通道；

通过所述跨进程通信通道将所述音视频流数据包传输给直播应用。

2.根据权利要求1所述方法，其特征在于，所述通过辅助直播音视频应用读取原始视频流和原始音频流，包括：

通过辅助直播音视频应用读取利用摄像头获得的原始视频流和利用声卡获得的原始音频流。

3.根据权利要求1所述方法，其特征在于，所述对原始视频流进行处理，得到视频流，包括：

通过所述辅助直播音视频应用接收用户的视频处理指令，将原始视频流转化为帧数据，根据所述视频处理指令对帧数据进行处理，将处理后帧数据重新组装成视频流。

4.根据权利要求3所述方法，其特征在于，所述视频处理指令对帧数据进行处理，包括：

根据所述视频处理指令从视频算法集中获取视频算法，利用视频算法对帧数据进行处理；其中，视频算法集包括视频美白算法、视频特效算法。

5.根据权利要求3所述方法，其特征在于，所述对原始音频流进行处理，得到音频流，包括：

通过所述辅助直播音视频应用接收用户的音频处理指令，根据所述音频处理指令对原始音频流进行处理，得到音频流。

6.根据权利要求5所述方法，其特征在于，所述根据所述音频处理指令对原始音频流进行处理，包括：

根据音频处理指令从音频算法集中获取音频算法，利用音频算法对原始音频流进行处理；其中，音频算法集包括音频降噪算法、叠加特效算法。

7.根据权利要求5所述方法，其特征在于，所述视频处理指令和所述音频处理指令对应的操作按键显示于所述辅助直播音视频应用的显示界面。

8.根据权利要求1所述方法，其特征在于，所述通过所述跨进程通信通道将所述音视频流数据包上传直播应用之后，还包括：

通过所述直播应用按预置规则将所述音视频流数据包上传到直播服务器。

9.一种辅助直播的音视频处理装置，其特征在于，包括；

读取处理模块：用于通过辅助直播音视频应用读取原始视频流和原始音频流，其中，所述辅助直播音视频应用包括应用程序层、多媒体接口层和多媒体服务层；对原始视频流进行处理，得到视频流；对原始音频流进行处理，得到音频流；包括：通过所述应用程序层接收用户的视频处理指令，并将所述视频处理指令通过所述多媒体接口层传输至所述多媒体服务层，通过所述多媒体服务层将所述原始视频流转化为帧数据，根据所述视频处理指令对所述帧数据进行处理，将处理后的帧数据重新组装成视频流；通过所述应用程序层接收用户的音频处理指令，并将所述音频处理指令通过所述多媒体接口层传输至所述多媒体服务层；根据所述音频处理指令对所述原始音频流进行处理，得到音频流；

时间戳模块：用于通过所述辅助直播音视频应用对齐所述视频流和音频流的时间戳，生成包含对齐后的视频流和音频流的音视频流数据包；

连通模块：用于连通所述辅助直播音视频应用与直播应用的跨进程通信通道，其中，所述跨进程通信通道表示进程间进行数据交换的通道；

传输模块：用于通过所述跨进程通信通道将所述音视频流数据包传输给直播应用。