[发明专利]基于捕获内容的截屏图像的像素将显示内容分割成区域

摘要

本申请涉及基于捕获内容的截屏图像的像素将计算设备上显示的内容分割成区域，特别是针对于将计算设备上显示的内容分割成区域的方法和装置。经由分析捕获显示的内容的至少一部分的“截屏图像”的像素来实现将计算设备上显示的内容分割成区域。可以分析截屏图像的各个像素以确定截屏图像的一个或更多个区域，并且可选地向每一个区域分配对应的语义类型。一些实现还针对于基于一个或更多个区域生成交互式内容以提供用于经由计算设备呈现给用户。

主权项

1.一种方法，包括：由计算设备的一个或多个处理器捕获截屏图像，所述截屏图像捕获由所述计算设备提供给用户的显示的至少一部分；将所述截屏图像分割为至少第一区域和第二区域，基于所述截屏图像的多个像素，由所述计算设备的处理器中的一个或多个进行所述分割；确定所述第一区域的至少一个第一特性，该确定由所述计算设备的处理器中的一个或多个来进行并且基于以下一个或多个：所述第一区域的多个像素、所述第一区域的大小以及所述第一区域的位置；确定所述第二区域的至少一个第二特性，该确定由所述计算设备的处理器中的一个或多个来进行并且基于以下一个或多个：所述第二区域的多个像素、所述第二区域的大小以及所述第二区域的位置；以及由所述计算设备的处理器中的一个或多个基于所述第一区域具有所述第一特性将所述第一区域的多个像素提供给内容识别引擎；其中，所述第二区域的像素基于所述第二区域具有所述第二特性而不被提供给任何内容识别引擎，并且其中，所述第一特性是第一语义标签，并且所述第二特性是第二语义标签。