[发明专利]屏幕映射以及用于屏幕内容编码的基于标准的渐进式编解码器

说明书

揭示了用于将屏幕内容递送到客户端设备的方法和系统。一方法包括，对于在特定时间对应于包括在屏幕中的各屏幕区域的多个编码单元的每一个，将包括在编码单元中的屏幕内容分类为具有选自多个内容类型的一个内容类型，至少一个内容类型包括屏幕图像类型，并基于对屏幕内容具有屏幕图像类型的确定，将基于标准的渐进式编码应用于那个编码单元的屏幕内容。该方法还包括，将针对屏幕区域的每一个屏幕区域的经编码的屏幕内容发送到客户端设备。

背景

屏幕内容，或由计算系统在显示器上向用户显示的描述信息的数据，通常包括多个不同类型的内容。这些内容可包括，例如，文本内容、视频内容、静态图像(例如，窗口或其它GUI元素的显示)、以及幻灯片或其它呈现素材。屏幕内容被越来越多地远程递送，例如使得两个或多个远程计算系统可共享公共的显示从而允许两个位于远程的个体同时查看相同屏幕，或另外地在电话会议中递送使得屏幕在多个个体之间共享。由于屏幕内容被远程递送，并且归因于渐增的屏幕分辨率，希望将此内容压缩到低于其本身位图尺寸的大小、以节省带宽并增强传输效率。

虽然存在针对图形数据(诸如屏幕内容)的多种压缩解决方案，这些压缩解决方案不足以用于可变屏幕内容。例如，传统的运动图片专家组(MPEG)编解码器因压缩解决方案依赖于顺序帧之间的差异而提供针对视频内容的令人满意的压缩。此外，许多设备具有集成的可高效解码这样编码的数据的MPEG解码器。然而，MPEG编码不提供针对非视频内容(尽管如此其可随时间变化)的大量的数据压缩，并因此未被典型地用于屏幕内容，尤其是针对远程屏幕显示。

用于将屏幕内容递送到远程系统的各方法可能是效率低的，可能需要大量数据通信，并且可能是资源密集的。因此，用于压缩并高效地表示供结合远程系统使用的屏幕内容(包括图形内容)的各策略，需要在接收设备上发生大量的处理，这使用大量功率。

概述

概括而言，本发明涉及屏幕映射以及用于屏幕内容编码的基于标准的渐进式编解码器。该屏幕映射和基于标准的渐进式编解码器允许各种类型的屏幕内容的高效分类，例如，供分发到远程设备。该基于标准的渐进式编解码器将遵循标准的代码流递送到接收设备，并因此允许那个远程设备利用包括在接收设备中的典型解码硬件。基于标准的渐进式编解码器的使用允许将屏幕内容的解码从接收设备的主中央处理单元(CPU)卸载。

在本发明的一个示例方面，揭示了向客户端设备递送屏幕内容的方法。该方法包括，对于在特定时间对应于包括在屏幕中的各屏幕区域的多个编码单元的每一个编码单元，将包括在编码单元中的屏幕内容分类为具有选自多个内容类型的一个内容类型，至少一个内容类型包括屏幕图像类型，并基于对屏幕内容具有屏幕图像类型的确定，将基于标准的渐进式编码应用于那个编码单元的屏幕内容。该方法还包括，将针对屏幕区域的每一个屏幕区域的经编码的屏幕内容发送到客户端设备。

在第二个方面，一个系统包括分类组件，该分类组件在计算系统上执行并被配置来将多个编码单元的每一个编码单元的屏幕内容分类为具有选自多个内容类型中的一个内容类型，至少一个内容类型包括屏幕图像类型。该系统还包括在计算系统上执行的一个或多个编码模块，该一个或多个编码模块被配置来基于内容类型将编码应用于编码单元的屏幕内容。该一个或多个编码模块被配置来将基于标准的渐进式编码应用于与具有该屏幕图像类型的编码单元相关联的屏幕内容。