[发明专利]使用屏幕截图元数据确定应用测试结果

权利要求书

1.一种用于应用屏幕截图的自动结构分析的方法，包括：

由计算系统响应于在第一目标设备处的应用的第一测试，在所述第一测试期间，在所述应用的图形用户界面被所述第一目标设备显示的同时，生成所述图形用户界面的第一屏幕截图集合；

由所述计算系统响应于在第二目标设备处的所述应用的第二测试，在所述第二测试期间，在所述图形用户界面被所述第二目标设备显示的同时，生成所述图形用户界面的第二屏幕截图集合，其中来自所述第一屏幕截图集合的每一个屏幕截图和来自所述第二屏幕截图集合的每一个屏幕截图包括所述图形用户界面的相应图像和相应元数据，所述相应元数据指示以下中的至少一个：存在于所述相应图像中的所述图形用户界面的一个或多个元素或在所述相应图像被生成时的所述应用或相应目标设备的状态；

在来自所述第一屏幕截图集合和所述第二屏幕截图集合的每一个屏幕截图中包括的相应图像是像素信息；以及

在来自所述第一屏幕截图集合和所述第二屏幕截图集合的每一个屏幕截图中包括的相应元数据是非像素信息；

由所述计算系统基于来自所述第一屏幕截图集合的屏幕截图的相应元数据和来自所述第二屏幕截图集合的屏幕截图的相应元数据而不基于来自所述第一屏幕截图集合的屏幕截图的相应图像或来自所述第二屏幕截图集合的屏幕截图的相应图像，确定来自所述第一屏幕截图集合的所述屏幕截图与来自所述第二屏幕截图集合的所述屏幕截图是否是相似的；以及

响应于确定来自所述第一屏幕截图集合的所述屏幕截图与来自所述第二屏幕截图集合的所述屏幕截图是相似的：

由所述计算系统将来自所述第二屏幕截图集合的所述屏幕截图指派至一个或多个屏幕截图的聚类，所述聚类与来自所述第一屏幕截图集合的屏幕截图共享由所述一个或多个屏幕截图中的每一个屏幕截图的相应元数据所定义的相似的元素结构，其中，所述聚类包括来自所述第一屏幕截图集合的所述屏幕截图；以及

由所述计算系统输出对包括来自所述第二屏幕截图集合的所述屏幕截图的所述相应图像的部分的所述聚类的图形指示以用于显示。

2.根据权利要求1所述的方法，其中，所述聚类是第一聚类，其中来自所述第一屏幕截图集合的所述屏幕截图是来自所述第一屏幕截图集合的第一屏幕截图，并且其中来自所述第二屏幕截图集合的所述屏幕截图是来自所述第二屏幕截图集合的第一屏幕截图，所述方法还包括：

基于来自所述第一屏幕截图集合的第二屏幕截图的相应元数据和来自所述第二屏幕截图集合的第二屏幕截图的相应元数据，确定来自所述第一屏幕截图集合的所述第二屏幕截图与来自所述第二屏幕截图集合的所述第二屏幕截图是否是相似的；

响应于确定来自所述第一屏幕截图集合的所述第二屏幕截图与来自所述第二屏幕截图集合的所述第二屏幕截图不是相似的：

创建一个或多个屏幕截图的第二聚类，所述第二聚类与来自所述第二屏幕截图集合的屏幕截图共享由所述第二聚类的所述一个或多个屏幕截图中的每一个屏幕截图的相应元数据所定义的相似的元素结构，其中，所述第二聚类包括来自所述第二屏幕截图集合的所述第二屏幕截图；以及

输出对所述第二聚类的图形指示以用于显示，其中：

对所述第二聚类的所述图形指示包括来自所述第二屏幕截图集合的所述第二屏幕截图的相应图像的部分；

对所述第二聚类的所述图形指示与对所述第一聚类的所述图形指示不同；以及

所述第二聚类与所述第一聚类不同。

3.根据权利要求1所述的方法，还包括：

基于来自所述第一屏幕截图集合的所述屏幕截图的所述相应元数据，确定来自所述第一屏幕截图集合的所述屏幕截图的元素标识符；

基于来自所述第二屏幕截图集合的所述屏幕截图的所述相应元数据，确定来自所述第二屏幕截图集合的所述屏幕截图的元素标识符；以及

基于来自所述第一屏幕截图集合的所述屏幕截图的所述元素标识符和来自所述第二屏幕截图集合的所述屏幕截图的所述元素标识符，确定指示来自所述第一屏幕截图集合的所述屏幕截图与来自所述第二屏幕截图集合的所述屏幕截图之间的相似度的量的相似度分值。