[发明专利]一种基于多数据源的数据传输方法及装置

说明书

本发明公开了一种基于多数据源的数据传输方法及装置，此方法包括：设置软件压缩包以及用于封装软件压缩包的执行文件，运行执行文件；接收第一数据获取请求，根据所述第一数据获取请求确定对应的数据源接口类型和目标数据源，确定与所述数据源接口类型对应的数据源接口配置信息，根据所述数据源接口配置信息构建第二数据获取请求，将所述第二数据获取请求发送至所述目标数据源，将从所述目标数据源获取的数据发送至所述第一数据获取请求的发送方。本方法可以使用户方便的访问不同类型的数据源的数据，有效兼容不同类型的数据源的数据。

技术领域

本发明涉及互联网技术领域，尤其涉及一种基于多数据源的数据传输方法及装置。

背景技术

随着互联网的发展，互联网各类型的业务大量增加，新类型的数据源也不断增加，访问不同数据源的方式也越来越多，访问成本也逐渐增大。

发明内容

为了解决上述技术问题，本发明提供了一种基于多数据源的数据传输方法及装置。

本发明提供的基于多数据源的数据传输方法，包括：

设置软件压缩包以及用于封装所述软件压缩包的执行文件，所述软件压缩包包括接口配置文件，所述接口配置文件包括N个数据源接口配置信息，不同的数据源接口配置信息对应于不同的数据源类型；其中，N为大于1的整数；

运行所述执行文件；

接收第一数据获取请求，根据所述第一数据获取请求确定对应的数据源接口类型和目标数据源，确定与所述数据源接口类型对应的数据源接口配置信息，根据所述数据源接口配置信息构建第二数据获取请求，将所述第二数据获取请求发送至所述目标数据源，将从所述目标数据源获取的数据发送至所述第一数据获取请求的发送方。

上述基于多数据源的数据传输方法还具有以下特点：

所述第一数据获取请求中包括以下内容：

数据源标识，

查询条件，所述查询条件包括以下两种查询方式：查询语句和查询文件，所述查询文件包括文件地址，所述文件地址对应的文件包括多个查询语句。

上述基于多数据源的数据传输方法还具有以下特点：

所述方法还包括：定时检测各数据源接口的软件是否更新，在检测到数据源接口的软件更新后，与所述数据源接口通信获得最新版本的软件，根据所述最新版本的软件更新相应数据源接口配置信息。

上述基于多数据源的数据传输方法还具有以下特点：

所述方法还包括：记录所述第一数据获取请求中的查询方式，还记录以下信息中的一种以上：所述第一数据获取请求的发送方的标识、接收所述第一数据获取请求的时间、所述目标数据源的标识、从所述目标数据源获取的数据的类型；

在接收到接收第一数据获取请求后，根据记录的内容优化所述第一数据获取请求中的查询语句。

上述基于多数据源的数据传输方法还具有以下特点：

所述优化所述第一数据获取请求中的查询语句包括以下方式中的一种：

对于mysql类数据源增加对主键的使用；

对于列式存储的数据，规避选择命令的操作；

针对索引式数据源，设置查询语句为根照主键接索引顺序访问数据。

上述基于多数据源的数据传输方法还具有以下特点：

所述数据源接口配置信息包括以下信息：数据源类型标识、数据源地址、端口、用户名，或者，还包括以下信息中的至少一种：密码、过滤正则。

本发明提供的基于多数据源的数据传输装置，包括：