[发明专利]音频内容的自适应再混合

说明书

一种电子装置，包括：音频源分离单元(201)，被配置为基于音频源分离确定与输入信号(1)的分离(2)；评估单元(203)，被配置为基于机器学习从分离(2)和输入信号(1)确定音频源分离的评估结果(3)；以及自适应再混合/上混合单元(202)，被配置为基于分离(2)并且基于评估结果(3)来确定输出信号(4)。

技术领域

本公开总体上涉及音频处理领域，具体地，涉及用于音频源分离和自适应上混合/再混合的方法和设备。

背景技术

例如，存在以光盘(CD)、磁带、可从互联网下载的音频数据文件的形式，还有以例如存储在数字视频磁盘等上的视频的声轨的形式等的许多可用的音频内容。通常，例如，针对单信道或者立体声设置，音频内容已从原始音频源信号混合而无需从用于产生音频内容的原始音频源中保持原始音频源信号。然而，存在设想再混合或者上混合音频内容的情况或者应用。例如，在将在比提供的音频内容具有更多可用音频信道的设备上播放音频内容的情况，例如，要在立体声设备上播放单信道音频内容、要在具有六个音频信道的环绕声设备上播放立体声音频内容等。在其他情况下，将修正所感知的音频源的空间位置或者将修正所感知的音频源的响度。

虽然普遍存在用于再混合音频内容的技术，但是，通常期望改进用于再混合音频内容的方法和设备。

发明内容

根据第一方面，本公开提供一种电子装置，包括：音频源分离单元，被配置为基于音频源分离确定与输入信号的分离；评估单元，被配置为基于机器学习，从分离和输入信号确定音频源分离的评估结果；以及自适应再混合/上混合单元，被配置为基于分离并且基于评估结果确定输出信号。

根据又一方面，本公开提供一种方法，包括：音频源分离过程，被配置为基于音频源分离确定与输入信号的分离；评估过程，被配置为基于机器学习从分离和输入信号确定音频源分离的评估结果；以及自适应再混合/上混合过程，被配置为基于分离并且基于评估结果来确定输出信号。

根据另一方面，本公开提供一种包括指令的计算机程序，指令在处理器上执行时使得处理器：基于音频源分离确定与输入信号的分离；基于机器学习，从分离和输入信号确定音频源分离的评估结果；以及通过自适应再混合/上混合基于分离并且基于评估结果来确定输出信号。

附图说明

参照附图通过示例的方式说明实施方式，在附图中：

图1示意性地示出了通过音频源分离(BSS)进行音频上混合/再混合的通用方法；

图2示意性地示出了基于盲法评估进行自适应再混合/上混合的方法；

图3对盲法评估的过程进行可视化；

图4示意性地描述训练CNN以执行源分离过程的盲法评估的过程；

图5a、图5b对自适应信号再混合/上混合的第一实施方式进行可视化；

图6示出了对根据第一实施方式的用于自适应信号再混合/上混合的方法进行可视化的流程图；以及

图7a、图7b、图7c和图7d示出了自适应信号再混合/上混合的第二实施方式。

图8提供了应用数字化单极综合算法的系统的示意图；以及

图9示意性地描述可用作自适应再混合/上混合系统的电子系统的实施方式。

具体实施方式

在参考图1至图6给出实施方式的详细说明之前，先进行一些概要说明。

实施方式公开了一种电子装置，包括：音频源分离单元，被配置为基于音频源分离确定与输入信号的分离；评估单元，被配置为基于机器学习从分离和输入信号确定盲源分离的评估结果；以及自适应再混合/上混合单元，被配置为基于分离并且基于评估结果来确定输出信号。