[发明专利]基于数据并发能力的数据流通方法及系统

说明书

本发明提供了一种基于数据并发能力的数据流通方法及系统，该方法为：多个数据供给方为数据需求方供给数据，所述数据需求方请求数据时，根据该次请求的数据量结合数据需求方和数据供给方的并发能力采用数据聚合的方式选择为该次请求提供数据的数据供给方，并向为该次请求提供数据的数据供给方发起请求，本发明的方法能够根据业务需求实时选择不同的数据供给方配送数据，数据配送可靠性高，且数据配送并发能力强。

技术领域

本发明属于数据流通技术领域，具体涉及一种基于数据并发能力的数据流通方法及系统。

背景技术

在现有的数据流通方法中，往往是单个的数据供给方对应单个数据需求方，然而在数据供给方和数据需求方的并发能力不同的情况下，系统需要满足高并发、低延时并且能充分利用数据供给方能力的的要求便成了一个问题。在普通的单点对单点的数据配送系统中，数据供给方和数据需求方的并发能力不同的情况下(数据需求方对数据的并发要求往往高于数据供给方)，存在以下问题：

1、由于数据供给方和数据需求方的并发能力不同，导致并发能力高的一方(数据需求方)的实际数据并发配送能力受限于数据供给方。

2、普通的数据配送系统的并发能力很难实现随着业务发展而扩展。

3、由于供方为单点，即仅由一个确定的数据供给方为数据需求方提供数据，而一旦该数据供给方不可用，则会直接导致数据配送无法进行。

发明内容

本发明是为了解决上述问题而进行的，目的在于提供一种能够根据业务需求实时选择不同的数据供给方配送数据，数据配送可靠性高，且能够提高数据配送的并发能力的基于数据并发能力的数据流通方法及系统。

本发明提供了一种基于数据并发能力的数据流通方法，其特征在于：多个数据供给方为数据需求方供给数据，所述数据需求方请求数据时，根据该次请求的数据量结合数据需求方和数据供给方的并发能力采用数据聚合的方式选择为该次请求提供数据的数据供给方，并向为该次请求提供数据的数据供给方发起请求。

进一步，在本发明提供的基于数据并发能力的数据流通方法中，还可以具有这样的特征：其中，所述数据需求方请求数据时，首先查询数据缓存模块中是否存储有请求需要的数据，若有，则从所述数据缓存模块中获取数据，若否，则通过数据聚合的方式从数据供给方获得数据，并将从数据供给方请求的数据缓存到所述数据缓存模块中。

进一步，在本发明提供的基于数据并发能力的数据流通方法中，还可以具有这样的特征：其中，所述数据缓存模块存储数据时采用分布式缓存。

进一步，在本发明提供的基于数据并发能力的数据流通方法中，还可以具有这样的特征：其中，对所述数据缓存模块缓存的数据设置存储时间，并对到达所述存储时间的缓存的数据进行删除。

进一步，在本发明提供的基于数据并发能力的数据流通方法中，还可以具有这样的特征：其中，对数据进行缓存时，对源数据的value值进行编码处理后存入所述数据缓存模块。

进一步，在本发明提供的基于数据并发能力的数据流通方法中，还可以具有这样的特征：其中，所述数据需求方向所述数据供给方请求数据前，通过心跳包的方式确定当前可用的数据供给方。

进一步，在本发明提供的基于数据并发能力的数据流通方法中，还可以具有这样的特征：其中，所述数据聚合的方式包括低价优先策略、质高优先策略、轮询策略、以及随机选择策略。

进一步，在本发明提供的基于数据并发能力的数据流通方法中，还可以具有这样的特征：其中，在确定数据聚合方式时，通过网页的形式为数据需求方提供选择数据聚合方式的接口，设定预定时间，定时拉取数据需求方选择的数据聚合方式，在所述预定时间内，数据需求方向所述数据供给方请求数据时，均按照该次选择的数据聚合方式进行数据配送。