[发明专利]业务数据处理方法、展示方法、装置、电子设备及介质在审
申请号: | 202010762023.1 | 申请日: | 2020-07-31 |
公开(公告)号: | CN111984433A | 公开(公告)日: | 2020-11-24 |
发明(设计)人: | 李文学;史忠伟 | 申请(专利权)人: | 五八有限公司 |
主分类号: | G06F9/54 | 分类号: | G06F9/54 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 吕俊秀 |
地址: | 300450 天津市滨海新区经济技术开*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 业务 数据处理 方法 展示 装置 电子设备 介质 | ||
1.一种业务数据处理方法,其特征在于,包括:
实时获取业务数据;
将所述业务数据存储到对应的消息队列中;
按照时间维度对每个所述消息队列中业务数据进行数据处理,得到对应时间内的数据特征值;
将对应时间内的所述数据特征值发送到第一中间存储容器进行存储,以便于所述第一中间存储容器在接收到在线业务系统或第三方业务系统访问数据值的请求时,所述第一中间存储容器根据所述数据特征值计算对应时间窗内的数据值,并将所述数据值反馈给所述在线业务系统或第三方业务系统。
2.根据权利要求1所述的方法,其特征在于,所述按照时间维度对每个所述消息队列中业务数据进行数据处理,得到对应时间内的数据特征值之后,所述方法还包括:
将对应时间内的所述数据特征值进行累加计算和/或去重计算;
将所述累加计算和/或去重计算的结果发送给第二中间存储容器进行存储,以便于所述第二中间存储容器在接收到在线业务系统访问数据值的请求时,根据所述累加计算和/或去重计算的结果计算对应时间窗内的数据值,并将所述数据值反馈给所述在线业务系统或第三方业务系统。
3.根据权利要求2所述的方法,其特征在于,所述将对应时间内的所述数据特征值进行累加计算和/或去重计算,包括:
将对应时间内的所述数据特征值分别发送到由卡夫卡kafka结构组成的第一延迟队列,所述第一延迟队列按照对应的时间戳存储所述数据特征值后通知所述第一计算中心对所述数据特征值进行累加计算,以及通过所述第一延迟队列对接收到的所述数据特征值进行过期管理,并将过期的数据特征值发送给所述第一计算中心,由所述第一计算中心从累加计算的结果中减去所述过期的数据特征值;
和/或
将对应时间内的所述数据特征值分别发送到由中间存储容器集合组成的顺序队列和由卡夫卡kafka组成的第二延迟队列,所述顺序队列和第二延迟队列分别按照对应的时间戳存储所述数据特征值,所述顺序队列按照窗口期大小对对存储的数据特征值进行裁剪,并在裁剪完成后通知第二计算中心计算当前顺序队列中剩余数据特征值的数量计算;以及所述顺序队列在收到所述第二延迟队列发送的过期消息时,根据所述过期消息按照窗口期大小进行裁剪,并在裁剪完成后通知所述第二计算中心计算当前队列中剩余数据特征值的数量计算。
4.一种业务数据展示方法,其特征在于,包括:
接收到查询用户网上业务操作的查询请求;
根据所述查询请求,向中间存储容器请求当前用户网上业务操作的数据值;以便于所述中间存储容器在接收到的所述查询请求时,根据存储的每个时间内的所述数据特征值计算当前时间窗内所述用户网上业务操作的数据值,并反馈所述数据值;
接收所述中间存储容器中发送当前时间窗内所述用户网上业务操作的数据值;
展示所述用户网上业务操作的数据值,以便于根据所述数据值确定是否对所述用户的网上业务操作进行处理。
5.一种业务数据处理装置,其特征在于,包括:
获取模块,用于实时获取业务数据;
第一发送模块,用于将所述业务数据发送到对应的消息队列中;
处理模块,用于按照时间维度对每个所述消息队列中业务数据进行数据处理,得到对应时间内的数据特征值;
第二发送模块,用于将所述处理模块得到对应时间内的所述数据特征值发送到第一中间存储容器进行存储,以便于所述第一中间存储容器在接收到在线业务系统或第三方业务系统访问数据值的请求时,所述第一中间存储容器根据所述数据特征值计算对应时间窗内的数据值,并将所述数据值反馈给所述在线业务系统或第三方业务系统。
6.根据权利要求5所述的装置,其特征在于,所述装置还包括:
计算模块,用于在所述处理模块得到对应时间内的数据特征值之后,将对应时间内的所述数据特征值进行累加计算和/或去重计算;
第三发送模块,用于将所述计算模块计算的所述累加计算和/或去重计算的结果发送给第二中间存储容器进行存储,以便于所述第二中间存储容器在接收到在线业务系统访问数据值的请求时,根据所述累加计算和/或去重计算的结果计算对应时间窗内的数据值,并将所述数据值反馈给所述在线业务系统或第三方业务系统。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于五八有限公司,未经五八有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010762023.1/1.html,转载请声明来源钻瓜专利网。