[发明专利]数据处理方法、装置、计算机设备及存储介质有效
申请号: | 201810603070.4 | 申请日: | 2018-06-12 |
公开(公告)号: | CN108733845B | 公开(公告)日: | 2020-11-13 |
发明(设计)人: | 王炼;吕远方;曾庚卓;邱佳文 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/22 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 祝亚男 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 计算机 设备 存储 介质 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
创建数据处理作业,所述数据处理作业用于指示在不同轮次处理不同批数据,所述不同批数据具有同一处理需求;
在每个轮次开始处理对应的一批数据时,创建所述数据处理作业在所述每个轮次的作业历史记录,所述作业历史记录用于保存所述数据处理作业的标识、轮次、开始时间、结束时间、处理数据量、和作业配置中至少一项;
每选取一个待处理的数据时,创建所述数据的全链路记录,所述全链路记录用于保存所述全链路记录的标识和所述数据在每个处理步骤的处理结果;
在处理所述数据的过程中,每执行一个处理步骤,将所述处理步骤的处理结果保存到所述全链路记录中;
当接收到查询指令时,显示所述数据对应的全链路记录;
当根据所述全链路记录的标识,未查询到所述数据的所述全链路记录时,显示同一批处理的数据中,除所述数据以外的数据的全链路记录。
2.根据权利要求1所述的方法,其特征在于,所述当接收到查询指令时,显示所述数据对应的全链路记录,包括:
当接收到所述查询指令时,从所述查询指令中获取所述全链路记录的标识;
当根据所述全链路记录的标识,查询到所述数据的所述全链路记录时,显示所述数据的所述全链路记录。
3.根据权利要求1所述的方法,其特征在于,所述每选取一个待处理的数据时,创建所述数据的全链路记录,包括:
在选取每批数据中的任一数据作为待处理的数据时,执行创建全链路记录的步骤。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对于所述每个轮次,每到达预设周期,从所述每个轮次的一批数据的全链路记录中,删除部分数据的全链路记录。
5.根据权利要求4所述的方法,其特征在于,所述从所述每个轮次的一批数据的全链路记录中,删除部分数据的全链路记录,包括:
从所述每个轮次的一批数据的全链路记录中,每隔一个数据的全链路记录删除一个数据的全链路记录。
6.根据权利要求4所述的方法,其特征在于,所述当接收到查询指令时,显示所述数据对应的全链路记录,包括:
当接收到所述查询指令,且所述数据的所述全链路记录未删除时,显示所述数据的所述全链路记录。
7.根据权利要求4所述的方法,其特征在于,所述当接收到查询指令时,显示所述数据对应的全链路记录,包括:
当接收到所述查询指令,且所述数据的所述全链路记录已删除时,显示同一数据处理作业同一轮次的数据中,除所述数据以外的数据的全链路记录。
8.根据权利要求4所述的方法,其特征在于,所述对于所述每个轮次,每到达预设周期,从所述每个轮次的一批数据的全链路记录中,删除部分数据的全链路记录,包括:
对于所述每个轮次,每到达预设周期,从所述每个轮次的一批数据的全链路记录中,删除部分数据的全链路记录,直至剩余一个数据的全链路记录。
9.一种数据处理装置,其特征在于,所述装置包括:
创建模块,用于创建数据处理作业,所述数据处理作业用于指示在不同轮次处理不同批数据,所述不同批数据具有同一处理需求;在每个轮次开始处理对应的一批数据时,创建所述数据处理作业在所述每个轮次的作业历史记录,所述作业历史记录用于保存所述数据处理作业的标识、轮次、开始时间、结束时间、处理数据量、和作业配置中至少一项;每选取一个待处理的数据时,创建所述数据的全链路记录,所述全链路记录用于保存所述全链路记录的标识和所述数据在每个处理步骤的处理结果;
保存模块,用于在处理所述数据的过程中,每执行一个处理步骤,将所述处理步骤的处理结果保存到所述全链路记录中;
显示模块,用于当接收到查询指令时,显示所述数据对应的全链路记录,所述查询指令携带所述全链路记录的标识;当根据所述全链路记录的标识,未查询到所述数据的所述全链路记录时,显示同一批处理的数据中,除所述数据以外的数据的全链路记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810603070.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种创意发生系统及方法
- 下一篇:一种互联网搜索广告竞价优化算法