[发明专利]一种基于云平台大数据的大数据处理方法在审
申请号: | 202110794221.0 | 申请日: | 2021-07-14 |
公开(公告)号: | CN113536343A | 公开(公告)日: | 2021-10-22 |
发明(设计)人: | 陈是君;赵晨翔;杨文华 | 申请(专利权)人: | 陈是君 |
主分类号: | G06F21/60 | 分类号: | G06F21/60 |
代理公司: | 厦门原创专利事务所(普通合伙) 35101 | 代理人: | 陈蓓蓓 |
地址: | 550002 贵州省贵阳市南*** | 国省代码: | 贵州;52 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 平台 数据 数据处理 方法 | ||
1.一种基于云平台大数据的大数据处理方法,其特征在于,应用于后台服务器,所述大数据处理方法包括:
分别获取通信连接的多个业务处理设备发送的多条业务数据,其中,每一条所述业务数据基于对应的所述业务处理设备生成;
对所述多条业务数据进行筛选处理,得到不同的多条待处理业务数据,其中,任意两条待处理处理业务数据中至少存在部分数据不同;
分别对所述多条待处理业务数据进行加密处理,得到每一条待处理业务数据对应的加密业务数据,并保存得到的多条加密业务数据。
2.根据权利要求1所述的基于云平台大数据的大数据处理方法,其特征在于,所述分别获取通信连接的多个业务处理设备发送的多条业务数据的步骤,包括:
分别获取通信连接的多个业务处理设备发送的数据发送通知信息;
分别对每一条所述数据发送通知信息进行解析处理,得到对应的信息解析结果,其中,所述信息解析结果为所述数据发送通知信息包括目标字符串数据或所述数据发送通知信息不包括目标字符串数据;
对于对应的所述信息解析结果为所述数据发送通知信息包括目标字符串数据的每一条所述数据发送通知信息,向对应的所述业务处理设备发送数据发送确认信息,其中,所述业务处理设备用于基于所述数据发送确认信息将生成的业务数据发送给所述后台服务器;
对于对应的所述信息解析结果为所述数据发送通知信息不包括目标字符串数据的每一条所述数据发送通知信息,向对应的所述业务处理设备发送数据发送拒绝信息,其中,所述业务处理设备用于基于所述数据发送拒绝信息不将生成的业务数据发送给所述后台服务器;
获取每一个所述业务处理设备基于所述数据发送确认信息发送的业务数据,得到多条业务数据。
3.根据权利要求2所述的基于云平台大数据的大数据处理方法,其特征在于,所述对于对应的所述信息解析结果为所述数据发送通知信息包括目标字符串数据的每一条所述数据发送通知信息,向对应的所述业务处理设备发送数据发送确认信息的步骤,包括:
对于对应的所述信息解析结果为所述数据发送通知信息包括目标字符串数据的每一条所述数据发送通知信息,确定对应的业务处理设备;
在预先确定的目标时长内,将生成的数据发送确认信息分别发送给确定的每一个所述业务处理设备,其中,所述目标时长基于所述后台服务器通信连接的所述业务处理设备的设备数量确定,且所述目标时长与确定的所述设备数量之间具有正相关关系。
4.根据权利要求1所述的基于云平台大数据的大数据处理方法,其特征在于,所述对所述多条业务数据进行筛选处理,得到不同的多条待处理业务数据的步骤,包括:
确定所述多条业务数据中是否存在相同的至少两条业务数据;
若存在相同的至少两条业务数据,则对所述相同的至少两条业务数据进行去重处理,保留其中一条业务数据,并保留所述相同的至少两条业务数据以外的其它业务数据;
若不存在相同的至少两条业务数据,则保留所述多条业务数据;
将保留的每一条所述业务数据作为待处理业务数据。
5.根据权利要求4所述的基于云平台大数据的大数据处理方法,其特征在于,所述确定所述多条业务数据中是否存在相同的至少两条业务数据的步骤,包括:
分别计算所述多条业务数据中的每一条业务数据的数据量,得到每一条业务数据对应的第一数据量;
基于对应的所述第一数据量是否相同,将所述多条业务数据进行分类,得到多个业务数据集合,并确定是否存在目标业务数据集合,其中,每一个所述业务数据集合包括至少一条业务数据,每一个所述目标业务数据集合包括多条业务数据,且属于同一个所述目标业务数据集合的多条业务数据对应的第一数据量相同;
若确定不存在所述目标业务数据集合,则确定所述多条业务数据中不存在相同的至少两条业务数据;
若确定存在所述目标业务数据集合,则针对每一个所述目标业务数据集合,将该目标业务数据集合中的每两条业务数据进行对比,以确定该两条业务数据之间是否相同;
若至少一个所述目标业务数据集合中至少包括有两条相同的业务数据,则确定存在相同的至少两条业务数据;
若不存在至少包括有两条相同的业务数据的目标业务数据集合,则确定所述多条业务数据中不存在相同的至少两条业务数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于陈是君,未经陈是君许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110794221.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种智能电动分药器
- 下一篇:计算机通信的网络安全监测方法及监测网元
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置