[发明专利]模糊隐私遮蔽的编码方法、系统及存储介质

说明书

本公开涉及模糊隐私遮蔽。具体地，描述了实施并且使用由编码器对包括多个图像帧的视频序列进行编码的技术的方法，装置，包括计算机程序产品。从视频流接收图像帧。接收输入，该输入指示所接收的图像帧中的应当被施加隐私遮蔽的一个或多个区域。该一个或多个区域由一个或多个编码单元表示。图像帧被编码成输出帧，其中，用具有设置为零的变换系数的帧内预测编码单元来代替一个或多个区域中的图像数据，该帧内预测编码单元是从编码器的预测阶段中获得的。

技术领域

本发明涉及视频编码，并且更具体地涉及对包括一个或多个隐私遮蔽的视频流进行编码。

背景技术

监视相机被用于许多不同的应用中，在室内和在户外两者，用于监视各种环境。可以由例如操作者或者警卫来监视描绘捕捉的场景的图像。在特定情况下，可能需要与一个部分不同处理所捕捉的图像的另一部分——诸如当例如为了个人诚信而需要排除图像的一部分时。

在此类实例中，操作者可以在监控装备的设定期间定义一个或多个隐私遮蔽。隐私遮蔽可以是静态的或动态的。直到操作者决定移动或去除它们之前，静态的隐私遮蔽典型地不移位。动态隐私遮蔽可以随时间而改变，并且操作者也可以定义应当何时施加隐私遮蔽。例如，操作者能够定义动态隐私遮蔽；使得如果在遮蔽的区域内检测到面部，则将面部遮蔽出去，否则将不向该区域施加遮蔽。

常常将隐私遮蔽作为覆盖施加到图像。隐私遮蔽常常具有多边形的形状，但是其他形状(其更精密地遵循要隐去的区域的形状)也是可能的。一些隐私遮蔽采取不透明区(例如，均匀黑区)的形式，而其他隐私遮蔽采取其中在隐私遮蔽区域上将图像数据“涂抹”的模糊的形式，或像素化的形式。像素化是单个像素值(常常是编码单元内的多个或所有像素的平均值)替换编码单元中的所有像素的处理。尽管如此，通常，与像素化相比，考虑对隐私遮蔽进行模糊更理想，因为其允许平滑边缘并且因此更好看。然而，与在硬件块中当前经济上可行的相比，模糊更难以实现并且需要更多计算资源来实施。

发明内容

本发明的目的是提供用于对具有多个图像帧的视频序列进行编码的技术，其使得能够向视频施加有美感的隐私遮蔽，而不会显著增加编码所需要的计算机资源方面的任何成本。此目的以及其他目的通过根据权利要求1所述的方法、根据权利要求8所述的编码器系统、根据权利要求12所述的计算机程序产品以及根据权利要求14所述的存储介质来实现。

根据第一方面，在计算机系统中通过用于对具有多个图像帧的视频序列进行编码的方法来全部或至少部分地实现这些和其他目的。该方法包括：

●从视频流接收图像帧；

●接收输入，该输入指示所接收的图像帧中的应当被施加隐私遮蔽的一个或多个区域，其中，一个或多个区域由一个或多个编码单元表示；

●将图像帧编码成输出帧，其中，用具有设置为零的变换系数的帧内预测编码单元来代替一个或多个区域中的图像数据，帧内预测编码单元是从编码器的预测阶段中获得的。

这提供使用在视频编码器的预测阶段中可用的信息的方式，并且使用该信息以产生与常规像素化的隐私遮蔽相比更加有美感的模糊的隐私遮蔽。此外，像素化解决方案典型地具有最大尺寸限制，因此它们将仅仅支持高达图像的某部分的遮蔽。当使用根据本发明的技术时，此类最大尺寸不存在。使用该方法还允许在不要求任何大量附加的计算资源的情况下来产生隐私遮蔽。此外，能够实现理想的帧同步，并且能够保证编码器不以任何方式改变隐私遮蔽。

根据一个实施例，由编码器自动地执行选择编码单元的尺寸的步骤。这允许编码器选择其在质量和比特率之间的最佳折衷选择。

根据一个实施例，由用户手动地进行选择编码单元的尺寸的步骤。能够接收用户输入允许用户对编码进行更好的控制，以及覆写由编码器确定的任何设置的能力。在特定情况下可以尤其有用，诸如例如满足特定像素化水平的正式用户需求。