[发明专利]数据处理方法、装置、设备和存储介质

说明书

本公开提供了一种数据处理方法，可以应用于大数据技术领域。该方法包括：响应于触发第一定时任务，从资源共享中心中提取增量政务评价数据；响应于触发第二定时任务，基于与第二定时任务关联的统计指标和预设查询策略，对增量政务评价数据进行统计分析，得到统计结果；将统计结果存入与统计指标关联的结果表中；以及响应于针对目标统计指标的数据查询请求，从目标结果表中的统计结果中确定目标查询结果，其中，目标结果表与目标统计指标相关联。此外，本公开还提供了一种数据处理装置、设备和存储介质。

技术领域

本公开涉及大数据技术领域，具体地，可应用于政务评价数据处理场景，更具体地，涉及一种数据处理方法、装置、设备、存储介质和程序产品。

背景技术

随着对服务评价的推广，群众对办理业务进行服务评价热情逐渐提升，政务评价数据的数量也逐渐增加。通过查询并分析政务评价数据，可以更好地提高政务服务。随着政务评价数据数量的上升，相关技术中实时查询政务评价数据的方法通常需要遍历大量的数据量，不仅降低了查询速度，还降低了分析的效率，实时查询政务评价数据的方法的已不再适用于查询含有大量评价数据的场景。

发明内容

有鉴于此，本公开提供了一种数据处理方法、装置、设备、一种存储介质和程序产品，可以有效提高数据查询的速度和数据分析的效率。

本公开的一个方面提供了一种数据处理方法，包括：响应于触发第一定时任务，从资源共享中心中提取增量政务评价数据；响应于触发第二定时任务，基于与上述第二定时任务关联的统计指标和预设查询策略，对上述增量政务评价数据进行统计分析，得到统计结果；将上述统计结果存入与上述统计指标关联的结果表中；以及响应于针对目标统计指标的数据查询请求，从目标结果表中的统计结果中确定目标查询结果，其中，上述目标结果表与上述目标统计指标相关联。

根据本公开的实施例，上述基于与上述第二定时任务关联的统计指标和预设查询策略，对上述增量政务评价数据进行统计分析，得到统计结果，包括：基于上述统计指标，从上述增量政务评价数据中确定待统计政务评价数据；基于上述第二定时任务的触发时间间隔和上述预设查询策略，将上述待统计政务评价数据切分为至少一个数据集合；对上述数据集合中的政务评价数据进行统计分析，得到上述数据集合的集合统计结果，其中，上述统计结果包括上述至少一个数据结合的集合统计结果。

根据本公开的实施例，集合统计结果包括至少一个统计变量；上述对上述数据集合中的政务评价数据进行统计分析，得到上述数据集合的集合统计结果，包括：在上述数据集合不为空的情况下，从上述数据集合中提取预设数量的政务评价数据；依次对于上述预设数量的政务评价数据，在上述政务评价数据与上述统计变量相对应的情况下，对上述统计变量进行累加；以及在上述数据集合为空的情况下，将上述至少一个统计变量的累加结果作为上述集合统计结果。

根据本公开的实施例，上述从资源共享中心中提取增量政务评价数据，包括：基于上述第一定时任务的触发时间间隔，确定第一目标时段；从上述资源共享中心中提取处于上述第一目标时段的数据，得到初始增量数据；以及采用预设数据转换策略处理上述初始增量数据，以得到上述增量政务评价数据。

根据本公开的实施例，上述处理方法还包括：将上述增量政务评价数据存入目标数据库中；其中，上述响应于触发第二定时任务，基于与上述第二定时任务关联的统计指标和预设查询策略，对上述增量政务评价数据进行统计分析，得到统计结果，包括：响应于触发上述第二定时任务，从上述目标数据库中获取上述增量政务评价数据；以及基于与上述第二定时任务关联的统计指标和上述预设查询策略，对上述增量政务评价数据进行统计分析，得到上述统计结果。

根据本公开的实施例，上述响应于针对目标统计指标的数据查询请求，从目标结果表中的统计结果中确定目标查询结果，包括：获取上述数据查询请求中携带的目标时段信息；基于上述目标时段信息，确定第二目标时段；以及从上述目标结果表的统计结果中提取与上述第二目标时段关联的统计结果，得到上述目标查询结果。