[发明专利]基于扁平架构的数据处理系统、方法及相关设备

说明书

本发明提供了一种基于扁平架构的数据处理系统，包括：多个数据服务接口，用于接收多个服务平台的服务数据；服务网关，用于对服务数据进行验证；数据处理模块，包括多个数据处理子模块，用于并发同步接收验证后的服务数据，并基于预先存储的价格、贡献率、各个用户的历史贡献值及总历史贡献值，对所接收到的服务数据进行全息分配计算，得到每个用户的分配资源；数据存储模块，用于存储分配资源。本发明还公开了一种基于扁平架构的数据处理方法、计算机设备及存储介质。本发明的基于扁平化的系统架构进行的数据处理方法，提高了大数据的处理效率，并提供了一种基于全息分配的数据处理方式，带来了全新的商业分配模式。

技术领域

本发明涉及大数据处理技术领域，尤其涉及一种基于扁平架构的数据处理系统、方法及相关设备。

背景技术

随着网络和电子商务技术的发展，人们越来越多的开始在网络上进行购物和消费，网上购物不仅方便快捷，而且商品种类和数量也极为丰富，商品营销商家也多不胜举，因而用户的选择也更多。

目前的电子商务平台上，营销商家推出了各种各样的营销模式，例如，消费打折，消费返还，消费分红等。然而，这些传统的营销模式大多基于层级架构的方式进行数据处理与计算，随着数据量的增多，这种基于层级架构的数据处理系统的数据处理效率越来越低下。

因而，有必要提供一种新的系统架构，以解决大数据的处理效率低下的技术问题，且可配合使用全新的商业模式，使得商务平台上的所有用户不仅能够共创共享经济红利，还能够实时且快速的享受资源分配。

发明内容

本发明的主要目的在于提供一种基于扁平架构的数据处理系统、数据处理方法、计算机设备及存储介质，旨在解决商务平台上的数据处理效率低下的技术问题，通过扁平化的系统架构，提高大数据的处理效率，并能够带来全新的资源分配模式。

为实现上述目的，本发明的第一方面提供一种基于扁平架构的数据处理系统，所述系统包括：

多个数据服务接口，用于接收多个服务平台的服务数据；

与所述多个数据服务接口连接的服务网关，用于对所述服务数据进行验证；

与所述服务网关连接的数据处理模块，所述数据处理模块包括多个数据处理子模块，每个所述数据处理子模块用于并发同步接收经过验证后的服务数据，并基于预先存储的多个服务或多个商品的价格、每个服务或每个商品的贡献率、各个用户的历史贡献值及总历史贡献值，对所述验证后的服务数据进行全息分配得到每个用户的分配资源；

与所述数据处理模块连接的数据存储模块，用于存储所述分配资源。

根据本发明的一个优选实施例，所述数据处理子模块基于预先存储的多个服务或多个商品的价格、每个服务或每个商品的贡献率、各个用户的历史贡献值及总历史贡献值，对所接收到的服务数据进行全息分配计算，得到每个用户的分配资源包括：

基于所述价格和所述贡献率的乘积计算得到当前贡献值；

基于所述每个用户的历史贡献值的加和计算得到总历史贡献值；

基于每个用户的历史贡献值与所述总历史贡献值的比例计算得到每个用户的贡献值权重；

根据所述当前贡献值和所述贡献值权重进行全息分配得到分配资源。

根据本发明的一个优选实施例，所述服务网关包括：

流量控制子模块，用于接收所述服务数据，并将所述服务数据的数据量与预设数据量阈值进行比较，当所述服务数据的数据量大于所述预设数据量阈值时，对所述服务数据进行拦截。

根据本发明的一个优选实施例，所述数据处理模块还包括：