[发明专利]一种基于rocketmq中间件的大批量数据处理方法及系统在审
申请号: | 202011051436.5 | 申请日: | 2020-09-29 |
公开(公告)号: | CN112181688A | 公开(公告)日: | 2021-01-05 |
发明(设计)人: | 陈思达;郭勇;吴海波;郭倩;方立 | 申请(专利权)人: | 银盛支付服务股份有限公司 |
主分类号: | G06F9/54 | 分类号: | G06F9/54;G06F16/178;G06F16/25 |
代理公司: | 深圳市深可信专利代理有限公司 44599 | 代理人: | 张勇 |
地址: | 518000 广东省深圳市龙华*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例提供一种基于rocketmq中间件的大批量数据处理方法,包括以下步骤:步骤一:从客户端上传数据文件至管理系统后台;步骤二:所述文件服务系统定时轮询所述数据文件,所述数据文件经过管理系统后台解析,生成若干个特定格式的数据;步骤三:所述管理系统后台将若干个特定格式的数据发送至rocketmq;步骤四:数据CRUD后台从所述rocketmq拉取的若干个特定格式的数据进行处理;本发明实施例减少文件系统等待时间,避免文件系统超时,并且一定程度上降低Oracle的IO压力,进而提高了文件管理系统更新数据的效率,提高用户的使用体验。 | ||
搜索关键词: | 一种 基于 rocketmq 中间件 大批量 数据处理 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于银盛支付服务股份有限公司,未经银盛支付服务股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011051436.5/,转载请声明来源钻瓜专利网。