[发明专利]缓存数据同步异步化的自动化测试方法和装置

说明书

本发明公开了一种缓存数据同步异步化的自动化测试方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：查询待查询的数据库字段，以获得查询结果；根据所述查询结果，从缓存系统中获取待对比的数据；对比所述查询结果与所述待对比的数据，确定测试结果。该实施方式能够自动完成数据对比，省时省力，效率高；能够覆盖大批量数据且不需要人工介入，可靠性高，以最少的耗时发现最多异步化问题，保证线上项目的正常平稳运行，可以适应多种异步化测试场景。

技术领域

本发明涉及计算机技术领域，尤其涉及一种缓存数据同步异步化的自动化测试方法和装置。

背景技术

在分布式系统中引入缓存可以提高性能，但是数据会存在两份，一份在数据库中，一份在缓存中。如果更新其中任何一份都会引起数据的不一致，数据的完整性就被破坏了。因此，同步缓存和数据库中的数据就非常重要。

目前，缓存与数据库之间的数据同步机制为了减少耗时一般都是采用异步队列的方式同步，可采用kafka等消息中间件处理消息生产和消费。例如，应用实例(instance)采集的Binlog Event(Binlog事件)会发布到Kafka的Topic(消息主题)，实际的业务应用只需要订阅和消费对应的Topic，既可以实时的获得Binlog Event，并可以在后续的业务逻辑中对获得的Binlog Event进行处理，这种Binlog解析异步机制在使用的过程中容易产生一些先来后消费和丢数据等影响数据一致性的问题，目前都是采集人工查看对比的方式来测试这种异步化场景。其中，Binlog是一个二进制格式的文件，用于记录用户对数据库更新的SQL(结构化查询语言)语句信息。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

人工对比容易出现误差，可靠性低，而且，对比的数据有限，存在很大可能无法发现问题，测试的准确性较差，对于项目的质量来说有很大风险；如果想要达到准确性则必须覆盖大范围的数据，耗时耗力，效率低且成本高。

发明内容

有鉴于此，本发明实施例提供一种缓存数据同步异步化的自动化测试方法和装置，能够自动完成数据对比，省时省力，效率高；能够覆盖大批量数据且不需要人工介入，可靠性高，以最少的耗时发现最多异步化问题，保证线上项目的正常平稳运行，可以适应多种异步化测试场景。

为实现上述目的，根据本发明实施例的一个方面，提供了一种缓存数据同步异步化的自动化测试方法，包括：待查询的数据库字段，以获得查询结果；根据所述查询结果，从缓存系统中获取待对比的数据；对比所述查询结果与所述待对比的数据，确定测试结果。

可选地，查询待查询的数据库字段，以获得查询结果包括：根据待查询的数据库字段名和待查询的数据库表名，获得数据库查询语句，执行所述数据库查询语句，获得查询结果。

可选地，根据所述查询结果，从缓存系统中获取待对比的数据包括：按照预设的拼装规则，从所述查询结果中确定键；在缓存系统中，确定所述键对应的值，将所述值作为待对比的数据。

可选地，查询待查询的数据库字段，以获得查询结果包括：查询待查询的数据库字段下的多个待查询项，以获得查询结果集；将所述查询结果集转换为列表对象；

根据所述查询结果，从缓存系统中获取待对比的数据包括：根据所述列表对象，从缓存系统中获取多个待对比的数据。

可选地，在查询待查询的数据库字段之前，所述方法还包括：根据可扩展标记语言文件，获取数据库连接信息和缓存系统连接信息；基于所述数据库连接信息，与数据库建立连接；基于所述缓存系统连接信息，与缓存系统建立连接。