[发明专利]一种数据统计方法、系统及电子设备和存储介质在审
申请号: | 201910500665.1 | 申请日: | 2019-06-11 |
公开(公告)号: | CN110222315A | 公开(公告)日: | 2019-09-10 |
发明(设计)人: | 刘忠真 | 申请(专利权)人: | 深圳市网心科技有限公司 |
主分类号: | G06F17/18 | 分类号: | G06F17/18 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 逻辑代码 任务信息 数据统计 统计 电子设备 预设 计算机可读存储介质 存储介质 开发效率 数据分析 自动完成 初始化 申请 替换 配置 开发 | ||
1.一种数据统计方法,其特征在于,包括:
获取统计逻辑代码;其中,所述统计逻辑代码为利用预设变量编写的、用于进行数据统计的代码;
初始化所述统计逻辑代码中每个任务的任务信息,并根据所述任务信息计算每个所述任务需要统计的数据时间范围;
根据所述任务信息替换每个所述任务中的所有所述预设变量,并根据每个所述任务对应的数据时间范围执行每个所述任务。
2.根据权利要求1所述数据统计方法,其特征在于,所述数据时间范围包括数据时间开始时间戳和数据时间结束时间戳,所述根据所述任务信息计算每个所述任务需要统计的数据时间范围,包括:
根据所述任务信息确定每个所述任务的调度时间、任务周期和周期偏移;
格式化所述调度时间,并利用格式化后的调度时间、所述任务周期和所述周期偏移计算所述数据时间开始时间戳和所述数据时间结束时间戳。
3.根据权利要求2所述数据统计方法,其特征在于,所述预设变量包括时间变量、数据变量和维表变量;
所述时间变量包括标准时间变量、自定义时间变量和自定义函数时间变量,所述标准时间变量包括所述数据时间开始时间戳和所述数据时间结束时间戳对应的所有格式的时间变量;
所述数据变量包括目标数据库、目标数据表和目标分区;
所述维表变量包括维表数据库、维表表名和维表过滤条件。
4.根据权利要求1所述数据统计方法,其特征在于,所述根据每个所述任务对应的数据时间范围执行每个所述任务,包括:
获取每个所述任务的依赖配置信息,并根据所述依赖配置判断每个所述任务的所有依赖任务对应的实例是否执行完成;
若是,则根据每个所述任务对应的数据时间范围执行每个所述任务。
5.根据权利要求1所述数据统计方法,其特征在于,所述根据每个所述任务对应的数据时间范围执行每个所述任务,包括:
确定每个所述任务的任务类型,并确定所述任务类型对应的计算引擎;
利用每个所述任务对应的所述计算引擎根据所述数据时间范围执行每个所述任务。
6.根据权利要求1所述数据统计方法,其特征在于,所述根据每个所述任务对应的数据时间范围执行每个所述任务之后,还包括:
输出每个所述任务的任务执行日志。
7.根据权利要求1所述数据统计方法,其特征在于,所述根据每个所述任务对应的数据时间范围执行每个所述任务之后,还包括:
判断每个所述任务是否存在任务导入配置;
若是,则根据所述任务导入配置将所述任务的任务结果导入目标位置。
8.根据权利要求1至7任一项所述数据统计方法,其特征在于,所述根据每个所述任务对应的数据时间范围执行每个所述任务,包括:
获取每个所述任务对应的任务运行周期,根据所述任务运行周期当检测到到达预设的运行时刻时,根据每个所述任务对应的数据时间范围执行每个所述任务。
9.一种电子设备,其特征在于,所述电子设备包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的数据统计程序,所述数据统计程序被所述处理器执行时实现如权利要求1至8任一项所述数据统计方法的步骤。
10.一种数据统计系统,其特征在于,包括:
获取模块,用于获取统计逻辑代码;其中,所述统计逻辑代码为利用预设变量编写的、用于进行数据统计的代码;
计算模块,用于初始化所述统计逻辑代码中每个任务的任务信息,并根据所述任务信息计算每个所述任务需要统计的数据时间范围;
执行模块,用于根据所述任务信息替换每个所述任务中的所有所述预设变量,并根据每个所述任务对应的数据时间范围执行每个所述任务。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有数据统计程序,所述数据统计程序被处理器执行时实现如权利要求1至8任一项所述数据统计方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市网心科技有限公司,未经深圳市网心科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910500665.1/1.html,转载请声明来源钻瓜专利网。