[发明专利]用于校正失真输入图像的方法和系统

说明书

本发明公开了一种用于校正图像的方法，该方法将输出图像划分成网格，该网格具有宽度小于图像宽度但足够宽的竖直区段，以在将失真校正的排区段写入到内存中时允许有效突发。失真校正引擎包括用于输入图像缓冲器的相对少量的内存，但不需要过度复杂的控制。该输入图像缓冲器容纳输入图像的足够排以覆盖输入图像的单个最竖直失真的排区段的失真。该输入图像缓冲器所需的内存可显著小于存储跨越输入图像内的完整排的最大失真的失真输入图像的所有排所需的内存。

技术领域

本发明涉及用于校正失真输入图像的方法和系统。

背景技术

US2014/009568和EP3101622(参考文献：FN-384-EP2)公开了用于校正存储在内存中的失真输入图像的方法，该方法包括将待显示的图像的局部区域划分成矩形图块的网格，每个图块对应于在所述输入图像内具有非矩形边界的失真图块。对于局部区域的每个图块，确定足以跨越所述失真图块的所述边界的所述输入图像的连续行的最大和最小内存地址位置。读取所述最大地址和最小地址之间失真输入的连续行。校正所述失真输入图像的非矩形部分的失真，以提供所存储的经校正的输出图像的图块。

虽然EP3101622的失真校正方法在许多应用中是有用的，但除此之外或作为另外一种选择，失真校正引擎(DCE)(在EP3101622中被称为几何失真引擎(GDE))也可用于直接从图像信号处理器(ISP)接收图像信息并校正例如透镜失真，因为此类图像正被写入系统内存以用于后续处理。此类后续处理的一个示例包括由诸如美国专利申请62/592,665和62/552,592(参考文献：FN-618-USP2)中公开的神经网络进行处理，以检测图像内的感兴趣区域并可能对其进行分类。

提供此类DCE通常需要用于存储输入图像的多个行(排)的输入图像缓冲器。然后可从缓冲排产生输出图像像素以考虑输入图像的失真。

图1示出了示出输入图像的透镜失真的网格。通常，对输入图像缓冲器的内存要求取决于由于失真而具有最大曲率的图像行。就图1的透镜失真而言，最大失真沿着与最顶部网格线GL1和底部网格线GL7对应的图像行发生。因此，一种方法将是提供足以存储L2-L1行的图像信息的输入缓冲器。虽然从控制角度来看这样的方法可能是简单的，但它需要相对较大的输入缓冲器，并且这可能显著增加实现此类功能的成本。

本申请的目的是提供用于校正此类失真输入图像的改进的系统和方法。

发明内容

根据本发明，提供了根据权利要求1所述的用于校正失真输入图像的方法。

在另外的方面，提供了被配置为执行根据权利要求1所述的方法的系统。

实施方案将输出图像划分成网格，该网格具有宽度小于图像宽度但足够宽的竖直区段，以在将失真校正的排区段写入到内存中时允许有效突发。在该实施方案中，此类突发包括256个像素的信息。

基于该方法的实施方案包括失真校正引擎，该失真校正引擎包括用于输入图像缓冲器的相对少量的内存，但不需要过度复杂的控制。输入图像缓冲器容纳输入图像的足够排以覆盖输入图像的单个最竖直失真的排区段的失真。在显著失真的图像中，如对于移动设备诸如智能电话常见的那样，输入图像缓冲器所需的内存可显著小于存储跨越输入图像内的完整排的最大失真的失真输入图像的所有排所需的内存。

例如，在常规方法可能需要存储250个输入图像排的情况下，使用本教导内容(其中网格包括8个竖直区段)的方法可能仅需要40排以用于输入图像缓冲器，因此，可能需要内存减少6倍以上，或者可能仅需要300kB来代替典型图像的1.8MB。

任何给定失真排的竖直划分区段被处理的顺序不需要是规则的，并且根据输入图像的失真来确定。该失真用至少部分地高速缓存的网格定义来定义。网格高速缓存可响应于图像行(排)的指示，该指示已由失真校正引擎读取以向失真校正核心提供其需要为排区段输出失真校正像素值序列的信息，该失真校正像素值序列随后可以以有效突发写入内存，从而逐个区段地构建输出图像。