[发明专利]基于云计算服务的大数据采集方法及大数据采集服务系统在审
申请号: | 202110354766.X | 申请日: | 2021-04-01 |
公开(公告)号: | CN112925964A | 公开(公告)日: | 2021-06-08 |
发明(设计)人: | 王琪;王林军 | 申请(专利权)人: | 王琪 |
主分类号: | G06F16/906 | 分类号: | G06F16/906;G06F16/36 |
代理公司: | 东莞市浩宇专利代理事务所(普通合伙) 44460 | 代理人: | 石艳丽 |
地址: | 150000 黑龙江省哈尔滨市南*** | 国省代码: | 黑龙江;23 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 计算 服务 数据 采集 方法 系统 | ||
1.一种基于云计算服务的大数据采集方法,其特征在于,应用于大数据采集服务系统,所述大数据采集服务系统与所述多个大数据注册终端通信连接,所述方法包括:
根据所述大数据注册终端的在线采集工具的在线采集行为策略获取每个大数据操作活动对应的活动触发事件集,所述活动触发事件集包括至少两个目标业务数据源的活动触发事件数据,所述活动触发事件数据包括所述目标业务数据源每次请求目标云计算业务资源时的活动触发事件和请求数字对象;
根据每个目标业务数据源请求所述目标云计算业务资源时的活动触发事件,确定每个活动触发事件集的第一大数据操作信息,所述第一大数据操作信息表示所述活动触发事件集中的目标业务数据源在请求所述目标云计算业务资源时的大数据意图程度;
根据每个目标业务数据源每次请求所述目标云计算业务资源时的请求数字对象,确定每个活动触发事件集的第二大数据操作信息;所述第二大数据操作信息表示所述活动触发事件集中的目标业务数据源请求所述目标云计算业务资源的请求业务范围;
根据每个大数据操作活动对应的活动触发事件集的所述第一大数据操作信息和所述第二大数据操作信息,进行大数据操作活动的关键大数据采集。
2.根据权利要求1所述的基于云计算服务的大数据采集方法,其特征在于,所述根据每个目标业务数据源请求所述目标云计算业务资源时的活动触发事件,确定每个活动触发事件集的第一大数据操作信息的步骤,包括:
根据每个目标业务数据源首次请求所述目标云计算业务资源时的活动触发事件,确定每个活动触发事件集的第一成员大数据操作信息;所述第一成员大数据操作信息表示所述活动触发事件集中的目标业务数据源在申请所述目标云计算业务资源时的大数据意图程度;
根据每个目标业务数据源在每个大数据操作活动内首次请求所述目标云计算业务资源时的活动触发事件,确定每个活动触发事件集的第二成员大数据操作信息;所述第二成员大数据操作信息表示所述活动触发事件集中的目标业务数据源在启用所述目标云计算业务资源时的大数据意图程度;
根据每个活动触发事件集的所述第一成员大数据操作信息和第二成员大数据操作信息,确定所述活动触发事件集的第一大数据操作信息。
3.根据权利要求1所述的基于云计算服务的大数据采集方法,其特征在于,所述获取每个大数据操作活动对应的活动触发事件集的步骤,包括:
获取各目标业务数据源的活动触发事件数据,其中,所述活动触发事件数据包括大数据操作活动签名以及所述目标业务数据源每次请求所述目标云计算业务资源时的活动触发事件和请求数字对象,所述大数据操作活动签名用于指示所述目标业务数据源获得所述目标云计算业务资源的大数据操作活动;
将各目标业务数据源的活动触发事件数据按照所述大数据操作活动签名进行分簇,获得分别与各大数据操作活动签名指示的大数据操作活动对应的参考活动触发事件簇,每个所述参考活动触发事件簇包括至少两个目标业务数据源的活动触发事件数据,同一参考活动触发事件簇中所有目标业务数据源具有相同的大数据操作活动签名;
统计每个参考活动触发事件簇中活动触发事件数据的触发跨度,将触发跨度大于等于预设阈值的参考活动触发事件簇作为所述活动触发事件集。
4.根据权利要求2所述的基于云计算服务的大数据采集方法,其特征在于,所述根据每个目标业务数据源首次请求所述目标云计算业务资源时的活动触发事件,确定每个活动触发事件集的第一成员大数据操作信息的步骤,包括:
将每个目标业务数据源首次请求所述目标云计算业务资源时的活动触发事件作为所述目标业务数据源的第一活动触发事件;
对每个目标业务数据源的所述第一活动触发事件进行特征处理,得到与各目标业务数据源对应的第一活动触发事件特征;
将各目标业务数据源的第一活动触发事件特征输入大数据意图分类模型,基于大数据意图分类模型对每个目标业务数据源的第一活动触发事件特征进行大数据意图特征分析,得到每个目标业务数据源的第一大数据意图程度;
基于每个活动触发事件集中目标业务数据源的数据源总量和第一大数据意图程度大于第一阈值的目标业务数据源的第一大数据意图程度,确定每个活动触发事件集对应的第一成员大数据操作信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于王琪,未经王琪许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110354766.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置