[发明专利]数据处理方法、装置、系统、计算机设备和存储介质在审
| 申请号： | 201910284179.0 | 申请日： | 2019-04-10 |
| 公开（公告）号： | CN110008257A | 公开（公告）日： | 2019-07-12 |
| 发明（设计）人： | 陈曦;姜国强 | 申请（专利权）人： | 深圳市腾讯计算机系统有限公司 |
| 主分类号： | G06F16/2458 | 分类号： | G06F16/2458;G06F16/27 |
| 代理公司： | 广州华进联合专利商标代理有限公司 44224 | 代理人： | 李文渊;何平 |
| 地址： | 518000 广东省深圳市南*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及一种数据处理方法、装置、系统、计算机设备和存储介质，方法包括：获取目标数据处理任务，目标数据处理任务是任务管理节点从分布式存储集群中获取任务信息，根据任务信息生成的；根据目标数据处理任务生成数据查询请求，向分布式存储集群发送数据查询请求，以使得分布式存储集群根据目标数据处理任务对应的数据处理范围获取对应的目标待处理数据，根据目标数据处理任务对应的数据处理规则对目标待处理数据进行处理，得到数据查询请求对应的查询结果；将查询结果解析为符合预设数据格式的目标数据，将目标数据写入到分布式存储集群中。上述方法可以提高查询效率。 | ||
| 搜索关键词： | 目标数据处理 分布式存储 数据处理 集群 数据查询请求 待处理数据 计算机设备 查询结果 存储介质 目标数据 任务信息 数据处理规则 预设数据格式 查询请求 查询效率 获取目标 任务管理 任务生成 解析 写入 | ||
【主权项】：
1.一种数据处理系统，所述数据处理系统包括任务管理节点以及数据处理节点，其中，所述任务管理节点，用于从分布式存储集群中获取任务信息，根据所述任务信息生成目标数据处理任务，将所述目标数据处理任务发送给所述数据处理节点，所述任务信息是所述分布式存储集群根据用户请求存储的；所述数据处理节点，用于根据所述目标数据处理任务生成数据查询请求，向所述分布式存储集群发送所述数据查询请求，以使得所述分布式存储集群根据所述目标数据处理任务对应的数据处理范围获取对应的目标待处理数据，根据所述目标数据处理任务对应的数据处理规则对所述目标待处理数据进行处理，得到所述数据查询请求对应的查询结果；所述数据处理节点，还用于将所述查询结果解析为符合预设数据格式的目标数据，将所述目标数据写入到所述分布式存储集群中。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于深圳市腾讯计算机系统有限公司，未经深圳市腾讯计算机系统有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910284179.0/，转载请声明来源钻瓜专利网。
