[发明专利]一种数据处理系统、方法及装置

说明书

本说明书公开了一种数据处理系统、方法及装置，系统中的各业务服务器可根据业务用户的业务请求执行业务，并将产生的业务数据存储至对应的业务数据库中，以使该业务数据库更新日志。之后，该系统中的管理端服务器，可通过监控各业务数据库的日志，确定各业务数据库的增量数据，并将该增量数据写入该系统的管理端数据库中。然后，将各业务数据库中的历史全量数据写入该管理端数据库中。当接收到管理用户的数据查询请求时，便可根据该管理端数据库中的数据进行数据查询，并将数据查询结果返回给管理用户。通过实时同步管理端数据库与各业务数据库中的业务数据的方式，使管理用户可基于管理端数据库进行数据查询服务，提高管理用户的数据查询效率。

技术领域

本申请涉及数据处理技术领域，尤其涉及一种数据处理系统、方法及装置。

背景技术

随着互联网以及大数据的发展，越来越多的用户通过互联网业务平台执行业务，使得业务平台所需处理的业务数据也不断增多。

为了提高业务处理效率，通常将业务拆分为若干子业务，并分别由该业务平台中的若干子业务平台执行。其中，每个子业务平台对应有单独的数据库，以存储执行的子业务的业务数据。

例如，电商平台可提供购买业务以及退货业务，因此可将电商平台拆分为购买平台以及退货平台，由购买平台执行借贷业务，由退货平台执行还款业务。并且，购买业务的业务数据存储于购买平台对应的数据库中，退货业务的业务数据存储于退货平台对应的数据库中。

当业务人员需要进行综合业务分析时，可通过远程调用的方式，分别从各子业务系统中获取所需的业务数据，以综合进行业务数据分析。

但是，分别调用各子业务系统以获取业务数据，往往需要较长的调用时间，导致业务分析的效率较低。

发明内容

本说明书实施例提供一种数据处理系统、方法及装置，用于部分解决现有技术中的问题。

本说明书实施例采用下述技术方案：

本说明书提供的一种数据处理系统，所述数据处理系统包含若干业务服务器、各业务服务器分别对应的业务数据库、管理端数据库以及所述管理端数据库对应的管理端服务器，其中：

针对每个业务服务器，该业务服务器根据业务用户的业务请求，执行所述业务请求对应的业务，并将执行业务产生的业务数据存储至该业务服务器对应的业务数据库中；

针对每个业务数据库，该业务数据库存储执行业务产生的业务数据，并根据存储的业务数据，确定该业务数据库的日志；

所述管理端服务器，监控各业务数据库的日志，并根据监控到的各业务数据库的日志，确定各业务数据库的增量数据，将确定出的增量数据写入所述管理端数据库中；

所述管理端服务器，将各业务数据库中的历史全量数据写入所述管理端数据库中；

所述管理端服务器，当接收到管理用户的数据查询请求时，根据所述管理端数据库中包含的各历史全量数据以及各增量数据，进行数据查询，并将数据查询结果返回给所述管理用户。

可选地，所述管理端服务器，针对监控到的各业务数据库的每个日志，判断该日志记录的是否为批量删除操作；

若是，则不根据该日志进行数据处理；

若否，则根据该日志进行数据处理，确定该日志对应的增量数据。

可选地，所述管理端服务器，针对监测到的每个业务数据库的日志，判断该业务数据库的日志记录的是否为对数据的修改操作；

若是，则将所述日志记录的对数据的修改操作转化为对数据的添加操作，并根据所述添加操作，确定该业务数据库的增量数据。