[发明专利]基于分布式集群的数据同步方法以及装置

摘要

本申请公开了一种基于分布式集群的数据同步方法，包括：获取从数据源同步数据的数据同步配置；将待处理任务按照任务划分维度划分为至少一个任务分片；将所述任务分片分配到分布式集群中的节点上执行；按照所述数据同步配置从所述数据源同步执行所述任务分片所需的待同步数据。所述基于分布式集群的数据同步方法，通过对待处理任务进行划分，将划分后获得的细粒度的任务分片分配到分布式集群中的节点上进行执行，更加高效的利用分布式集群的计算资源，业务响应更加及时，并在此基础上将数据源的数据同步至分布式集群，提升了数据访问的实时性。