[发明专利]数据集成服务处理方法、装置及电子设备在审
申请号: | 202210271202.4 | 申请日: | 2022-03-18 |
公开(公告)号: | CN114840585A | 公开(公告)日: | 2022-08-02 |
发明(设计)人: | 王凯;刘宏 | 申请(专利权)人: | 阿里巴巴(中国)有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F9/54;G06Q10/10 |
代理公司: | 北京众达德权知识产权代理有限公司 11570 | 代理人: | 南海燕 |
地址: | 310000 浙江省杭州市滨江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 集成 服务 处理 方法 装置 电子设备 | ||
1.一种数据集成服务处理方法,其特征在于,包括:
获取软件即服务SaaS的租户关联的多个数据源服务之间的依赖关系;所述多个数据源服务包括部署在所述租户侧的数据源服务;
通过执行离线任务,以所述租户关联的商品标识为参数,对所述SaaS服务的服务接口中的输入参数获取逻辑进行离线调用,以便在所述离线任务中对所述多个数据源服务进行远程调用;
将所述多个数据源服务返回的输出数据进行组合后,将所述商品标识与输出数据组合结果之间的对应关系保存到所述SaaS服务侧的数据库中;
接收到以目标商品标识为参数对所述SaaS服务的服务接口发起的在线查询请求后,从所述数据库中查询获得所述目标商品标识对应的输出数据组合结果,并将其作为所述服务接口中算法处理逻辑的输入参数,以获得算法处理结果并返回给查询方。
2.根据权利要求1所述的方法,其特征在于,
所述确定当前服务的租户关联的多个数据源服务之间的依赖关系,包括:
提供数据源服务配置界面,以用于分别为各数据源服务输入配置信息,其中,所述配置界面中包括用于为当前数据源服务指定上游数据源服务的操作选项,所述上游数据源服务为一个或多个;
根据接收到的配置信息,确定同一租户关联的多个数据源服务之间的依赖关系。
3.根据权利要求1所述的方法,其特征在于,还包括:
根据所述依赖关系,创建多个数据源服务之间的有向图结构,并根据所述有向图的拓扑排序,为所述租户创建支持并行以及串行执行的节点流程编排方案;
所述在所述离线任务中对所述多个数据源服务进行远程调用,包括:
将所述节点流程编排方案与支持拓扑任务运行的任务分发框架相结合,以生成运行态的拓扑任务,并按照所述节点流程编排方案对所述多个数据源服务进行远程调用。
4.根据权利要求3所述的方法,其特征在于,
所述将所述节点流程编排方案与支持拓扑任务运行的任务分发框架相结合,包括:
根据输入的商品标识发起多轮循环,在每轮循环中,对不依赖其他数据源服务的数据源服务,和/或所依赖的数据源服务已完成处理的数据源服务,进行调用处理,并在处理完后加入到已完成集合中,直到将同一流程中的多个数据源服务全部调用处理完成。
5.根据权利要求1所述的方法,其特征在于,还包括:
如果所述服务器中不存在所述目标商品标识对应的数据,则通过实时调用数据源服务的方式获取数据源服务的输出数据,并组合为所述服务接口中的算法处理逻辑的输入参数。
6.根据权利要求1所述的方法,其特征在于,还包括:
在将所述输出数据组合结果保存到数据库中之后,接收所述租户提交的指定商品对应的输出数据发生变化的通知信息;
通过对所述指定商品重新执行所述离线任务,获取到各数据源服务对应的新的输出数据,并对所述数据库中保存的该指定商品对应的输出数据组合结果进行更新。
7.根据权利要求1所述的方法,其特征在于,还包括:
如果所述在线查询请求带有实时查询标志,则通过实时调用数据源服务的方式获取数据源服务的输出数据,并组合为所述服务接口中的算法处理逻辑的输入参数。
8.根据权利要求1所述的方法,其特征在于,还包括:
在所述离线调用的过程中,根据令牌桶算法对各数据源服务进行限流。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴(中国)有限公司,未经阿里巴巴(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210271202.4/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置