[发明专利]一种音频处理方法、装置、电子设备和存储介质

说明书

本申请涉及多媒体技术领域，尤其涉及一种音频处理方法、装置、电子设备和存储介质，用以降低音频处理的资源耗费。其中，方法包括：基于承载应用程序的终端设备的配置信息，获得各初始音频信号各自对应的处理模式；分别基于各初始音频信号各自的处理模式，对初始音频信号进行处理，获得各目标音频信号，其中，输入音频信号经处理后，获得的目标音频信号为采集音频信号，输出音频信号经处理后获得的目标音频信号为共享音频信号；对各目标音频信号进行混音，并对混音后音频进行编码，获得待发送编码信号。本申请通过基于配置信息获得初始音频信号的处理模式，实现不同终端设备之间的音频共享，对处理后的音频信号混音后编码，节省计算资源。

背景技术

随着多媒体技术的发展，音频共享技术日益成熟，并已广泛应用于音视频会议、网络直播等多端互动场景。所谓音频共享技术是指：通过发送方使用的多个音频设备或应用程序，实时采集不同音频信号，并向各接收方进行实时传输，使接收方可以同时听到多个音源信号。

通过音频共享技术共享的音频信号可分为采集音频和回采音频，其中，采集音频是指发送方的终端设备搭载的音频采集设备采集到的发送方的音频信号，回采音频则是指采集到的发送方的终端设备搭载的扬声器播放的音频信号。

目前，为了保证采集的回采音频的质量，大部分终端设备的操作系统都已提供了音频回环接口（Audio Loopback API），音频回环接口可捕捉即将进入扬声器物理输出接口前的音频信号，捕捉后将其作为输入源，直接与采集音频一起发送给各接收方。

例如，网络直播场景下，在主播伴随音乐伴奏唱歌的过程中，将通过麦克风采集的主播唱歌的声音作为采集音频，以及将通过音频回环接口捕获的即将进入扬声器的音乐伴奏，作为回采音频；进一步地，主播的直播客户端将采集音频和回采音频发送给观众的直播客户端，实现观众可以同时听到主播唱歌的声音和音乐伴奏。

由于不同设备搭载的音频采集设备和音频回环接口千差万别，采集到的采集音频和回采音频在格式上也存在诸多不同，相关技术中，为了将采集音频和回采音频一起发送给各接收方，将采集音频和回采音频分别编码，并将编码后的音频通过两个传输链路发送。但是，这种方案由于使用了多路音频编码，并且在原有的传输链路的基础上新增了传输链路，会极大的消耗设备性能与传输带宽。

发明内容

本申请实施例提供一种音频处理方法、装置、电子设备和存储介质，用以降低音频处理的资源耗费。

本申请实施例提供的一种音频处理方法，包括：

基于承载应用程序的终端设备的配置信息，获得采集到的至少两种初始音频信号各自对应的处理模式，其中，不同的初始音频信号是通过所述终端设备配置的不同设备采集的，所述至少两种初始音频信号中至少包含：通过所述终端设备上的音频采集设备采集的输入音频信号，以及，通过所述终端设备上目标类型的音频回环接口采集的输出音频信号；

分别基于所述至少两种初始音频信号各自对应的处理模式，对相应的初始音频信号进行处理，获得至少两种目标音频信号，其中，所述至少两种目标音频信号具有相同的音频格式，所述输入音频信号经处理后，获得的目标音频信号为采集音频信号，所述输出音频信号经处理后获得的目标音频信号为共享音频信号；

对所述至少两种目标音频信号进行混音，并对混音后音频进行编码，获得待发送编码信号。

本申请实施例提供的一种音频处理装置，包括：

确定单元，用于基于承载应用程序的终端设备的配置信息，获得采集到的至少两种初始音频信号各自对应的处理模式，其中，不同的初始音频信号是通过所述终端设备配置的不同设备采集的，所述至少两种初始音频信号中至少包含：通过所述终端设备上的音频采集设备采集的输入音频信号，以及，通过所述终端设备上目标类型的音频回环接口采集的输出音频信号；