[发明专利]辅助直播的音视频处理方法及装置

说明书

本发明公开了一种辅助直播音视频处理方法及装置。该方法包括：通过辅助直播音视频应用读取原始视频流和原始音频流；对原始视频流进行处理，得到视频流；对原始音频流进行处理，得到音频流；对齐所述视频流和音频流的时间戳，生成包含对齐后的视频流和音频流的音视频流数据包；连通所述辅助直播音视频应用与直播应用的跨进程通信通道；通过所述跨进程通信通道将所述音视频流数据包传输给直播应用。本发明降低了设备资源的损耗，很大程度的避免了直播过程卡顿、宕机的现象，使得直播效果更为生动，提高用户使用体验。

【技术领域】

本发明涉及直播技术领域，尤其涉及一种辅助直播的音视频处理方法及装置。

【背景技术】

现如今直播行业日益兴盛，主播在直播过程中经常需要针对自己的声音进行处理或者是直播过程中适时添加一些音效以达到调和直播气氛的作用，再者就是针对主播在直播中的呈现给观众的视频进行以实现提高主播的颜值，维护主播形象特征，美化直播环境的功能。如图3所示的现有直播过程多个应用协同配合的工作图，其中主播在直播过程中运用到的直播相关应用程序具有四个或者更多，其中有气氛音的添加、背景音的添加、音效调节以及视频调节，在此方案的直播过程中，主播需不断切换应用程序来达到直播过程的生动性及有趣性，其操作繁琐复杂，不仅如此，多个辅助直播应用将耗损直播过程的设备资源，主播设备在运行多个应用程序进行直播时极大可能性会造成直播设备的卡顿甚至是宕机现象，故在此急需一款集多个辅助直播应用功能为一体的应用。直播本身对主播用户的机器已经有较高的配置要求，会耗费较大的电脑资源，若需要同时再多开几个软件进行协同配合工作的话，经常会造成电脑不负重堪，从而导致直播过程中的卡顿现象，直播过程中若是出现宕机的状况更是无法弥补的损失，用户体验十分不好。不仅如此，需要主播耗费主播大量的精力去学习各种软件的基本操作，而且在直播过程中需要来回切换不同的软件，导致主播经常手忙脚乱，无法专心于直播本身，进而影响直播质量。

【发明内容】

为克服上述技术问题或者至少部分地解决上述技术问题，特提出以下技术方案：

本发明提供一种辅助直播的音视频处理方法，包括：

通过辅助直播音视频应用读取原始视频流和原始音频流；对原始视频流进行处理，得到视频流；对原始音频流进行处理，得到音频流；

对齐所述视频流和音频流的时间戳，生成包含对齐后的视频流和音频流的音视频流数据包；

连通所述辅助直播音视频应用与直播应用的跨进程通信通道；

通过所述跨进程通信通道将所述音视频流数据包传输给直播应用。

具体的，所述通过辅助直播音视频应用读取原始视频流和原始音频流，包括：

通过辅助直播音视频应用读取利用摄像头获得的原始视频流和利用声卡获得的原始音频流。

具体的，所述对原始视频流进行处理，得到视频流，包括：

通过所述辅助直播音视频应用接收用户的视频处理指令，将原始视频流转化为帧数据，根据所述视频处理指令对帧数据进行处理，将处理后帧数据重新组装成视频流。

具体的，所述视频处理指令对帧数据进行处理，包括：

根据所述视频处理指令从视频算法集中获取视频算法，利用视频算法对帧数据进行处理；其中，视频算法集包括视频美白算法、视频特效算法。

具体的，所述对原始音频流进行处理，得到音频流，包括：

通过所述辅助直播音视频应用接收用户的音频处理指令，根据所述音频处理指令对原始音频流进行处理，得到音频流。

具体的，所述根据所述音频处理指令对原始音频流进行处理，包括：