[发明专利]数据处理方法、系统、装置、电子设备及可读存储介质在审
申请号: | 201911108626.3 | 申请日: | 2019-11-13 |
公开(公告)号: | CN112631767A | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 西方;姚帅 | 申请(专利权)人: | 华控清交信息科技(北京)有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F21/60;G06F21/62 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 100084 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 系统 装置 电子设备 可读 存储 介质 | ||
1.一种数据处理方法,其特征在于,应用于数据库引擎,所述方法包括:
接收针对待处理数据的计算任务;
根据预设拆分规则,确定所述待处理数据包括的每个数据分段在所述待处理数据中的位置信息;
根据所述计算任务和所述位置信息,生成第一配置文件;
将所述第一配置文件发送给服务端,以通过所述服务端针对多个数据分段并行执行所述计算任务,获得所述待处理数据的汇总结果,包括:将各数据分段转换为密文形式的密文分片,然后根据所述计算任务,针对密文分片进行基于多方安全计算协议的计算,获得中间结果,再对所述中间结果进行基于多方安全计算协议的汇总,获得针对所述待处理数据的汇总结果。
2.根据权利要求1所述的方法,其特征在于,所述根据所述计算任务和所述位置信息,生成第一配置文件,包括:
针对每个数据分段,根据所述计算任务和该数据分段的所述位置信息,生成针对该数据分段的第一配置文件;
所述将所述第一配置文件发送给服务端,包括:
将多个第一配置文件发送给服务端。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
接收服务端返回的提示信息,每个提示信息用于表征一个数据分段已经被计算出对应的中间结果。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
在接收到全部数据分段各自对应的提示信息后,向所述服务端发送携带有汇总任务的第二配置文件,使所述服务端根据所述汇总任务并基于多方安全计算协议对所述中间结果进行汇总,获得针对所述待处理文件的汇总结果。
5.一种数据处理方法,其特征在于,应用于任务管理服务器,所述方法包括:
接收数据库引擎发送的第一配置文件,所述第一配置文件中包括计算任务和数据分段的位置信息,所述数据分段是待处理数据中的一部分,所述第一配置文件是所述数据库引擎根据预设拆分规则确定出每个数据分段在待处理数据中的位置信息后,根据所述位置信息和针对所述待处理数据的计算任务所生成的;
将所述第一配置文件提交给多个任务处理设备,以使多个任务处理设备针对多个数据分段并行执行所述计算任务,获得所述待处理数据的汇总结果,包括:将各数据分段转换为密文形式的密文分片,然后根据所述计算任务,针对密文分片进行基于多方安全计算协议的计算,获得中间结果,再对所述中间结果进行基于多方安全计算协议的汇总,获得针对所述待处理数据的汇总结果。
6.一种数据处理系统,其特征在于,包括数据库引擎和任务管理服务器;
所述数据库引擎用于接收针对待处理数据的计算任务,根据预设拆分规则,确定所述待处理数据包括的每个数据分段在所述待处理数据中的位置信息,根据所述计算任务和所述位置信息,生成第一配置文件,并将所述第一配置文件发送给所述任务管理服务器;
所述任务管理服务器用于接收所述数据库引擎发送的第一配置文件,并将该第一配置文件提交给多个任务处理设备,以通过所述多个任务处理设备并行执行所述各第一配置文件所携带的计算任务,包括:将各数据分段转换为密文形式的密文分片,然后根据所述计算任务,针对密文分片进行基于多方安全计算协议的计算,获得中间结果,再对所述中间结果进行基于多方安全计算协议的汇总,获得针对所述待处理数据的汇总结果。
7.一种数据处理装置,其特征在于,所述处理装置包括:
计算任务接收模块,用于接收针对待处理数据的计算任务;
位置信息确定模块,根据预设拆分规则,确定所述待处理数据包括的每个数据分段在所述待处理数据中的位置信息;
第一配置文件生成模块,用于根据所述计算任务和所述位置信息,生成第一配置文件;
第一配置文件发送模块,用于将所述第一配置文件发送给服务端,以通过所述服务端针对多个数据分段并行执行所述计算任务,获得所述待处理数据的汇总结果,包括:将各数据分段转换为密文形式的密文分片,然后根据所述计算任务,针对密文分片进行基于多方安全计算协议的计算,获得中间结果,再对所述中间结果进行基于多方安全计算协议的汇总,获得针对所述待处理数据的汇总结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华控清交信息科技(北京)有限公司,未经华控清交信息科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911108626.3/1.html,转载请声明来源钻瓜专利网。