[发明专利]数据处理方法以及装置在审
申请号: | 202210762371.8 | 申请日: | 2022-06-30 |
公开(公告)号: | CN115080241A | 公开(公告)日: | 2022-09-20 |
发明(设计)人: | 郭志强 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 金鹏 |
地址: | 310013 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 以及 装置 | ||
本说明书实施例提供数据处理方法以及装置,其中数据处理方法应用于第一处理端,包括:确定若干个目标对象和目标对象各自对应的多个处理算子,其中,目标对象携带针对多个处理算子的执行序列,每个处理算子对应一个数据队列,处理算子为对目标对象的特征向量进行降维处理的算子;在对目标对象执行任一处理算子的情况下,冻结目标对象,并将目标对象添加至任一处理算子对应的数据队列;从任一数据队列中提取多个目标对象,并将多个目标对象发送至第二处理端,使第二处理端对多个目标对象并发执行任一数据队列对应的处理算子;接收第二处理端反馈的处理结果,根据处理结果解冻多个目标对象。准确集合目标对象,提高对目标对象执行处理算子的效率。
技术领域
本说明书实施例涉及计算机技术领域,特别涉及数据处理方法。本说明书一个或者多个实施例同时涉及数据处理装置,一种数据处理系统,一种计算设备,一种计算机可读存储介质以及一种计算机程序。
背景技术
随着计算机技术的发展,越来越多的计算机技术应用在数据处理领域中。以图学习架构为例,一个图由两类元素构成,分别称为“点”(或节点、结点)和“边”。每条边有两个顶点作为其端点,我们称这条边“连接”了它的两个端点。
目前,可以将一个图中的所有点和边统一发送至图形处理器中进行计算,但是,超大图中往往包括大量点和边,这些点和边在处理过程中,会花费大量时间,极大地影响了数据处理的效率,因此,亟需一种高效的数据处理方案。
发明内容
有鉴于此,本说明书实施例提供了数据处理方法。本说明书一个或者多个实施例同时涉及数据处理装置,一种数据处理系统,一种计算设备,一种计算机可读存储介质以及一种计算机程序,以解决现有技术中存在的技术缺陷。
根据本说明书实施例的第一方面,提供了一种数据处理方法,应用于第一处理端,该方法包括:
确定若干个目标对象和目标对象各自对应的多个处理算子,其中,目标对象携带针对多个处理算子的执行序列,每个处理算子对应一个数据队列,处理算子为对目标对象的特征向量进行降维处理的算子;
在对目标对象执行任一处理算子的情况下,冻结目标对象,并将目标对象添加至任一处理算子对应的数据队列;
从任一数据队列中提取多个目标对象,并将多个目标对象发送至第二处理端,使第二处理端对多个目标对象并发执行任一数据队列对应的处理算子;
接收第二处理端反馈的处理结果,根据处理结果解冻多个目标对象。
根据本说明书实施例的第二方面,提供了一种数据处理方法,应用于第二处理端,该方法包括:
接收第一处理端发送的多个目标对象,其中,目标对象由第一处理端确定若干个目标对象和目标对象各自对应的多个处理算子,在对目标对象执行任一处理算子的情况下,冻结目标对象,并将目标对象添加至任一处理算子对应的数据队列,从任一数据队列中提取得到,目标对象携带针对多个处理算子的执行序列,每个处理算子对应一个数据队列,处理算子为对目标对象的特征向量进行降维处理的算子;
对多个目标对象并发执行任一数据队列对应的处理算子,获得处理结果;
向第一处理端反馈处理结果,使第一处理端根据处理结果解冻多个目标对象。
根据本说明书实施例的第三方面,提供了一种数据处理装置,应用于第一处理端,该装置包括:
确定模块,被配置为确定若干个目标对象和目标对象各自对应的多个处理算子,其中,目标对象携带针对多个处理算子的执行序列,每个处理算子对应一个数据队列,处理算子为对目标对象的特征向量进行降维处理的算子;
冻结模块,被配置为在对目标对象执行任一处理算子的情况下,冻结目标对象,并将目标对象添加至任一处理算子对应的数据队列;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210762371.8/2.html,转载请声明来源钻瓜专利网。