[发明专利]自适应DCT锐化器

说明书

提供了用于锐化或以其它方式修改压缩图像而无需对图像解压缩和重新编码的方法。整体图像质量是基于压缩图像的源、压缩图像的量化表或者一些其它因素来确定的，并且与图像质量相对应的缩放因数的集合被选择。所选择的缩放因数随后被应用于图像的量化表的对应量化因数或者描述压缩图像的图像内容的压缩图像的其它参数。给定缩放因数的集合中的缩放因数可以由机器学习过程来确定，所述机器学习过程涉及到基于训练图像来训练缩放因数，所述训练图像通过解压缩并且随后锐化或以其它方式修改压缩图像的源集合来确定。这些方法可以关于编码图像大小和图像修改方法的计算成本提供改善。

相关申请的交叉引用

本申请要求于2018年12月05日提交的美国申请序列号16/210,900的权益，所述申请通过引用全文结合于此。

背景技术

数字图像可以被压缩以便提供诸如减少数字图像的存储和/或传输成本的优势。存在用于图像压缩的各种有损和无损方法。有损图像压缩方法导致了输入图像的压缩版本，其无法被用来精确地重新生成输入图像。然而，这样的有损压缩方法允许生成对于人类感知而言表现为与输入图像充分相似的输出图像，从而在至少一些场境中是能够被接受的。一些有损图像压缩技术可以允许以这种程度的相似度来换取有所提高的压缩比，从而作为所输出的、压缩图像的图像质量降低的回报而允许较小的压缩图像文件大小。

发明内容

本公开的第一方面涉及一种用于有效增强压缩图像(例如，改善其锐度)的方法，该方法包括：(i)获取编码图像，所述编码图像包括(a)指示相应空间频率处编码图像的图像内容的系数的集合，和(b)指示应用于系数的集合中的相应系数的缩放程度的量化因数的集合；(ii)获取编码图像的质量值；(iii)基于质量值，从多个缩放因数的集合中选择缩放因数的集合；(iv)通过应用所选择的缩放因数的集合以缩放编码图像的量化因数的集合来生成经修改的编码图像；以及(v)将经修改的编码图像的指示传送至请求方设备。

系数的集合可以是离散余弦变换系数。所选择的缩放因数的集合可以包括N个缩放因数，其中该N个缩放因数中的每一个对应于相应不同的空间频率，并且其中应用所选择的缩放因数的集合以缩放编码图像的量化因数的集合包括将N个缩放因数中的每个给定缩放因数应用于量化因数的集合中与该给定缩放因数的空间频率相对应的一个或多个量化因数。N可以是15。获取编码图像的质量值可以包括确定编码图像是由用户提交还是从视频提取。获取编码图像的质量值可以包括基于量化因数确定质量值。编码图像的量化因数可以被存储在编码图像的量化表中。获取编码图像可以包括从视频流的帧中提取编码图像。编码图像可以根据JPEG图像压缩格式被编码。

本公开的第二方面涉及一种方法，该方法包括：(i)获取图像的训练集合，其中图像的训练集合中的每个图像具有相应的质量值；(ii)基于训练集合中的图像的质量值来从训练集合中选择具有与特定质量值相对应的相应质量值的一个或多个图像；并且针对一个或多个图像中的每个给定图像：(iii)获取该给定图像的编码版本和该给定图像的参考版本，其中该给定图像的编码版本包括(i)指示相应空间频率处该给定图像的图像内容的系数的集合，和(ii)指示应用于系数的集合中的相应系数的缩放程度的量化因数的集合；(iv)应用与该特定质量值相对应的缩放因数的集合以缩放该给定图像的编码版本的量化因数的集合；(v)通过使用已经被缩放因数的集合缩放的量化因数对系数的集合进行解码来生成该给定图像的增强解码版本；以及(vii)基于该给定图像的增强解码版本和该给定图像的参考版本之间的比较关系来更新缩放因数的集合。