[发明专利]基于大数据和边缘计算的数据整合方法及云端大数据中心有效
申请号: | 202010853210.0 | 申请日: | 2020-08-23 |
公开(公告)号: | CN111949410B | 公开(公告)日: | 2021-05-07 |
发明(设计)人: | 陈顺发 | 申请(专利权)人: | 北京德昇科技有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 102600 北京市大兴区北京经*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 数据 边缘 计算 整合 方法 云端 数据中心 | ||
本发明揭示的基于大数据和边缘计算的数据整合方法及云端大数据中心,首先目标边缘计算节点设备上传的业务处理结果,其次通过查找预先建立的业务数据标签分布针对各业务处理结果分别生成对应的业务传递信息以及各业务传递信息之间的传递路径信息,然后基于从每个目标边缘计算节点设备中提取得到的设备日志文本对传递路径信息进行筛分以确定出目标路径参数,最后根据目标路径参数将各业务处理结果进行整合以得到综合处理结果。本发明能够将业务处理结果进行云端化从而实现业务数据处理和业务结果整合的明确分工,使得边缘计算节点设备能够高效处理业务数据且云端大数据中心能够对边缘计算节点设备上报的业务处理结果进行有效整合。
技术领域
本发明涉及大数据和边缘计算处理技术领域,特别涉及一种基于大数据和边缘计算的数据整合方法及云端大数据中心。
背景技术
随着科技的发展,各类业务数据(例如工业生产数据、智慧城市监控数据、车自动驾驶控制数据、智能医疗调度数据等)的数据规模和数据类别逐渐增多,这对传统的云计算模式带来了极大数据处理挑战,常常会导致传统云计算模式的过负荷。
为改善这一技术问题,现有技术逐渐将云计算模式转换为边缘计算模式。这样,一方面能够将大量的业务数据处理边缘化以减小云计算模式对云服务器的负荷压力,另一方面还能够将大量业务数据进行分布式配置,从而提高数据处理的效率和时效性。
然而,发明人发现,现有的基于边缘计算的业务数据处理方法难以实现业务数据之间的有效整合。
发明内容
为改善相关技术中存在的难以实现业务数据之间的有效整合的技术问题,本发明提供了基于大数据和边缘计算的数据整合方法及云端大数据中心。
第一方面,提供一种基于大数据和边缘计算的数据整合方法,应用于云端大数据中心,包括以下步骤:
获取多个边缘计算节点设备中任意两个目标边缘计算节点设备分别上传的对下发的待处理业务数据进行处理之后所生成的业务处理结果;
通过查找预先建立的业务数据标签分布,针对各业务处理结果分别生成该业务处理结果所对应的业务传递信息以及各业务传递信息之间的传递路径信息;
基于从每个目标边缘计算节点设备中提取得到的设备日志文本对所述传递路径信息进行筛分,以确定出所述传递路径信息中不随每组设备日志文本的更新而变化的目标路径参数;
根据所述目标路径参数,将各业务处理结果进行整合以得到综合处理结果。
可替换地,所述业务数据标签分布通过以下方式建立:
获取两个目标边缘计算节点设备分别记录的业务行为轨迹信息,以及各业务行为轨迹信息中对应的目标边缘计算节点设备的业务互动数据;
检测各业务行为轨迹信息的行为轨迹指向参数;通过所述行为轨迹指向参数的时序特征配对,拟合各业务行为轨迹信息的行为轨迹指向参数,得到各业务行为轨迹信息的业务行为队列的队列标签;
针对各业务行为轨迹信息,基于该业务行为轨迹信息的业务行为队列的队列标签,确定记录该业务行为轨迹信息的目标边缘计算节点设备的业务类型;根据各目标边缘计算节点设备的业务类型,对各业务行为轨迹信息分别进行业务映射,以在所述云端大数据中心中生成该业务行为轨迹信息对应的业务数据映射路径;
对各业务数据映射路径进行聚类,得到所述云端大数据中心中的所有业务数据映射路径对应的路径网络分布图;
根据各目标边缘计算节点设备的业务互动数据,获得所述路径网络分布图中的路径标签列表;基于所述路径标签列表对所述路径网络分布图进行业务数据标签提取,得到业务数据标签分布。
可替换地,根据所述目标路径参数,将各业务处理结果进行整合以得到综合处理结果,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京德昇科技有限公司,未经北京德昇科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010853210.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置