[发明专利]用于具有摄像机的远程控制飞行器的流水线化视频接口

权利要求书

1.一种用于通过低延迟摄像机系统来对帧进行流水线化的方法，所述方法包括：

接收由所述低延迟摄像机系统捕捉到的一个或多个未处理的帧；

对图像处理器流水线进行超频，所述超频用于增加所述低延迟摄像机系统的图像处理器的工作频率，使得存在帧之间的空闲图像处理器时间；

在所述帧之间的所述空闲图像处理器时间期间，通过所述图像处理器对所述一个或多个未处理的帧执行一个或多个图像处理操作，所述一个或多个图像处理操作包括锐化、压缩或颜色转换中的至少一项；

将处理后的所述帧从包括多个流水线级的所述图像处理器的第一流水线级转发到第二流水线级；

对处理后的所述帧的图像数据进行形变，所述形变用以减小图像数据的大小而不丢失图像信息，其中所述形变包括将在所述图像处理器流水线中的外部接口对齐到数据从所述图像处理器流水线就绪的时间，以避免缓冲；

将处理后的所述帧传送到编码器，所述编码器包括硬件编码器；

通过所述图像处理器对处理后的所述帧执行一个或多个预处理操作，所述一个或多个预处理操作包括缩放、调整大小、裁剪中的至少一项；

通过所述编码器对预处理后的所述帧执行一个或多个图像编码操作，所述一个或多个图像编码操作包括基于切片的编码，所述基于切片的编码在预处理后的所述帧的切片可用时，对输入帧进行编码以减少与输入缓冲相关联的延迟；以及

将编码后的所述帧发送到无线接口以用于传输。

2.根据权利要求1所述的方法，其中，所述一个或多个图像处理操作包括执行拜耳变换、去马赛克、降噪、图像稳定、或卷帘快门伪像减少中的至少一个。

3.根据权利要求1所述的方法，其中对所述图像处理器流水线进行超频和对图像数据进行形变被执行以将延迟减少至少一个帧。

4.根据权利要求1所述的方法，其中所述形变响应于检测输入/输出接口而被执行，并且所述输入/输出接口时钟不同于所述图像处理器时钟。

5.根据权利要求1所述的方法，还包括：在多个图像处理流水线级的每个图像处理流水线级中对一个或多个未处理的所述帧执行图像处理操作中的至少一个。

6.根据权利要求1所述的方法，还包括：将处理后的所述帧存储在系统存储器中。

7.一种用于通过编码器模块对帧进行流水线化的方法，所述方法包括：

从低延迟摄像机系统接收至少一个处理后的帧；

通过硬件图像预处理器执行一个或多个预处理操作；

通过处理后的所述帧上的快速图像编码器对预处理的所述帧执行一个或多个图像编码操作；以及

将编码后的所述帧发送到无线接口进行传输，

其中所述编码操作还包括基于切片的编码，所述基于切片的编码对处理后的所述帧的切片进行编码和传送。

8.根据权利要求7所述的方法，其中所述编码操作还包括基于先前图像集合的历史传输数据来改变处理后的所述帧的分辨率。

9.根据权利要求7所述的方法，其中所述编码操作还包括基于先前帧的比特率和吞吐量来使用恒定的比特率。