[发明专利]数据异步导出方法、装置、设备及其存储介质在审
申请号: | 202310403701.9 | 申请日: | 2023-04-06 |
公开(公告)号: | CN116431731A | 公开(公告)日: | 2023-07-14 |
发明(设计)人: | 陈沛 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/25;G06F9/50;G06F9/52 |
代理公司: | 深圳市世联合知识产权代理有限公司 44385 | 代理人: | 郝少剑 |
地址: | 518000 广东省深圳市福田区益田路*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 异步 导出 方法 装置 设备 及其 存储 介质 | ||
1.一种数据异步导出方法,其特征在于,包括下述步骤:
步骤S1,接收目标数据导出指令,解析所述导出指令,获取指令解析结果,其中,所述指令解析结果中包括待调用的目标接口地址;
步骤S2,基于所述目标接口地址和预设的导出参数,生成导出任务;
步骤S3,执行所述导出任务,获取所述目标数据;
步骤S4,将所述目标数据填充写入预设的接收文件内,生成导出文件,终止执行所述导出任务。
2.根据权利要求1所述的数据异步导出方法,其特征在于,在执行所述基于所述目标接口地址和预设的导出参数,生成导出任务的步骤之前,所述方法还包括:
根据预设的锁检测方式,判断目标用户与目标数据间是否已存在导出任务;
若存在,则向所述目标用户返回提示;
若不存在,则通过所述目标接口建立所述目标用户与目标数据间的导出任务,并为所述导出任务添加Redis分布式锁。
3.根据权利要求1所述的数据异步导出方法,其特征在于,在执行所述基于所述目标接口地址和预设的导出参数,生成导出任务的步骤之后,所述方法还包括:
根据所述导出任务的配置级别,判断是否需要对所述导出任务的执行做隔离处理;
若需要对所述导出任务的执行做隔离处理,则根据预设的隔离线程池标识,将所述导出任务发送到预设的隔离线程池;
若不需要对所述导出任务的执行做隔离处理,则根据预设的普通线程池标识,将所述导出任务发送到预设的普通线程池。
4.根据权利要求1所述的数据异步导出方法,其特征在于,在所述执行所述导出任务,获取所述目标数据的步骤过程中,所述方法还包括:
根据预设的百分比算法公式,计算已完成导出的数据量占所述导出任务需要导出的总数据量的百分比;
基于所述百分比和预设的导出进度条构建动态进度条,并将所述动态进度条实时展示在预设的导出监测界面。
5.根据权利要求4所述的数据异步导出方法,其特征在于,在执行所述将所述动态进度条实时展示在预设的导出监测界面的步骤之后,所述方法还包括:
采用定时任务方式,定时监测所述动态进度条对应的所述百分比;
若在连续的N个定时任务间隔时间下,所述百分比一直处于未变动状态,则终止执行所述导出任务,重新执行步骤S2至步骤S3,其中,N为大于1的正整数;
若连续的M个导出任务都导出失败,则向所述导出监测界面发送人工介入提示,其中,M为大于1的正整数。
6.根据权利要求1或5所述的数据异步导出方法,其特征在于,在执行所述终止执行所述导出任务的步骤之后,所述方法还包括:
获取所述导出任务对应的Redis分布式锁的锁标识信息;
根据所述锁标识信息解开所述导出任务对应的Redis分布式锁。
7.根据权利要求1所述的数据异步导出方法,其特征在于,所述将所述目标数据填充写入预设的接收文件内,生成导出文件的步骤,具体包括:
将获取到的所述目标数据插入到所述接收文件预留的指定接收位置处,获取插入完成的接收文件;
根据预设的算法公式:对所述插入完成的接收文件进行分页处理,其中,p表示目标页数,L表示所述目标数据的总数据条数,l表示所述导出文件每页可记录的数据条数;
获取分页处理之后的接收文件作为所述导出文件。
8.根据权利要求2所述的数据异步导出方法,其特征在于,在执行所述将所述目标数据填充写入预设的接收文件内,生成导出文件的步骤之后,所述方法还包括:
采用心跳上报机制,实时上报所述目标数据的导出状态;
若所述导出状态为导出已完成状态,则根据预设的邮件触发任务向所述目标用户发送数据导出完成的邮件提示,其中,所述邮件提示中包括所述导出文件的文件名及下载链接。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310403701.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:异丁醛和正丁醛的联产装置和工艺
- 下一篇:一种电源箱检修用绝缘监测仪
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置