[发明专利]基于云计算服务的大数据采集方法及大数据采集服务系统在审
申请号: | 202110354766.X | 申请日: | 2021-04-01 |
公开(公告)号: | CN112925964A | 公开(公告)日: | 2021-06-08 |
发明(设计)人: | 王琪;王林军 | 申请(专利权)人: | 王琪 |
主分类号: | G06F16/906 | 分类号: | G06F16/906;G06F16/36 |
代理公司: | 东莞市浩宇专利代理事务所(普通合伙) 44460 | 代理人: | 石艳丽 |
地址: | 150000 黑龙江省哈尔滨市南*** | 国省代码: | 黑龙江;23 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 计算 服务 数据 采集 方法 系统 | ||
本公开实施例提供一种基于云计算服务的大数据采集方法及大数据采集服务系统,通过考虑多种大数据操作活动的数据评估方案,如第一大数据操作信息是基于活动触发事件的大数据意图特征对大数据操作活动进行分析,第二大数据操作信息则是通过用户的请求业务信息对大数据操作活动进行分析,两者结合能同时结合活动触发事件的大数据意图特征和请求业务信息,提高关键大数据采集的精准度。
技术领域
本公开涉及大数据采集技术领域,示例性地,涉及一种基于云计算服务的大数据采集方法及大数据采集服务系统。
背景技术
大数据采集是指从传感器和智能设备、企业在线系统、企业离线系统、社交网络和互联网平台等获取数据的过程。数据包括 RFID 数据、传感器数据、用户行为数据、社交网络交互数据及移动互联网数据等各种类型的结构化、半结构化及非结构化的海量数据。不但数据源的种类多,数据的类型繁杂,数据量大,并且产生的速度快,传统的数据采集方法完全无法胜任。所以,大数据采集技术面临着许多技术挑战,一方面需要保证数据采集的可靠性和高效性,同时还要避免重复数据。相关技术中,如何提高关键大数据采集的精准度,是亟待思考和解决的技术问题。
发明内容
为了至少克服现有技术中的上述不足,本公开的目的在于提供一种基于云计算服务的大数据采集方法及大数据采集服务系统。
第一方面,本公开提供一种基于云计算服务的大数据采集方法,应用于大数据采集服务系统,所述大数据采集服务系统与所述多个大数据注册终端通信连接,所述方法包括:
根据所述大数据注册终端的在线采集工具的在线采集行为策略获取每个大数据操作活动对应的活动触发事件集,所述活动触发事件集包括至少两个目标业务数据源的活动触发事件数据,所述活动触发事件数据包括所述目标业务数据源每次请求目标云计算业务资源时的活动触发事件和请求数字对象;
根据每个目标业务数据源请求所述目标云计算业务资源时的活动触发事件,确定每个活动触发事件集的第一大数据操作信息,所述第一大数据操作信息表示所述活动触发事件集中的目标业务数据源在请求所述目标云计算业务资源时的大数据意图程度;
根据每个目标业务数据源每次请求所述目标云计算业务资源时的请求数字对象,确定每个活动触发事件集的第二大数据操作信息;所述第二大数据操作信息表示所述活动触发事件集中的目标业务数据源请求所述目标云计算业务资源的请求业务范围;
根据每个大数据操作活动对应的活动触发事件集的所述第一大数据操作信息和所述第二大数据操作信息,进行大数据操作活动的关键大数据采集。
第二方面,本公开实施例还提供一种基于云计算服务的大数据采集系统,所述基于云计算服务的大数据采集系统包括大数据采集服务系统以及与所述大数据采集服务系统通信连接的多个大数据注册终端;
所述大数据采集服务系统,用于:
根据所述大数据注册终端的在线采集工具的在线采集行为策略获取每个大数据操作活动对应的活动触发事件集,所述活动触发事件集包括至少两个目标业务数据源的活动触发事件数据,所述活动触发事件数据包括所述目标业务数据源每次请求目标云计算业务资源时的活动触发事件和请求数字对象;
根据每个目标业务数据源请求所述目标云计算业务资源时的活动触发事件,确定每个活动触发事件集的第一大数据操作信息,所述第一大数据操作信息表示所述活动触发事件集中的目标业务数据源在请求所述目标云计算业务资源时的大数据意图程度;
根据每个目标业务数据源每次请求所述目标云计算业务资源时的请求数字对象,确定每个活动触发事件集的第二大数据操作信息;所述第二大数据操作信息表示所述活动触发事件集中的目标业务数据源请求所述目标云计算业务资源的请求业务范围;
根据每个大数据操作活动对应的活动触发事件集的所述第一大数据操作信息和所述第二大数据操作信息,进行大数据操作活动的关键大数据采集。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于王琪,未经王琪许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110354766.X/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置