[发明专利]一种支付系统根据订单时间进行数据冷热分离方法及系统

说明书

本发明提供了一种支付系统根据订单时间进行数据冷热分离方法，所述方法为：步骤S1、对支付系统订单数据库中的订单数据进行设定为冷数据或者热数据；步骤S2、设定一个定时任务，触发冷热数据分离；步骤S3、设定一冷数据库，将支付系统订单数据库中标记为冷数据的订单数据移入到冷数据库中；步骤S4、在订单查询页中进行冷热数据的查询使用；该方法提高了查询的效率。

技术领域

本发明涉及数据存储技术领域，特别是一种支付系统根据订单时间进行数据冷热分离方法及系统。

背景技术

支付系统有一个订单查询功能，随着时间的推移订单表有千万的数据量，加上关联表，数据量达到上亿。上亿数据量查询效率变得十分低下，还有可能造成数据库死锁的风险。现有技术可以通过优化表结构、梳理业务代码、增加数据库索引等办法来提高响应速度，但这些方法治标不治本，可能提高目前这个数据量级的查询速度，但随着业务发展，数据还会继续增加，最终还是回到查询缓慢的状态。虽然常规根据月份来分库分表也是一种处理大数据量的设计方案，但是可能使热数据的查询复杂化，例如查询3个月内的订单，可能要跨3个数据库表，查询效率低。

发明内容

为克服上述问题，本发明的目的是提供一种支付系统根据订单时间进行数据冷热分离方法，根据订单时间维度进行数据冷热分离，有效解决订单系统数据量增长后导致的查询效率低下问题。

本发明采用以下方案实现：一种支付系统根据订单时间进行数据冷热分离方法，所述方法包括如下步骤：

步骤S1、对支付系统订单数据库中的订单数据进行设定为冷数据或者热数据；

步骤S2、设定一个定时任务，触发冷热数据分离；

步骤S3、设定一冷数据库，将支付系统订单数据库中标记为冷数据的订单数据移入到冷数据库中；

步骤S4、在订单查询页中进行冷热数据的查询使用。

进一步的，所述步骤S1进一步具体为：根据支付系统的业务场景，在设定时间内的订单存在90%以上的查询量，则被标识为热数据，否则，大于设定时间的订单数据被标识为冷数据，如果订单数据被标识为冷数据，则业务代码不会再对冷数据进行写操作。

进一步的，所述步骤S2进一步具体为：设定一个定时任务，在支付系统访问低谷期的时间段定扫描订单数据库，扫面订单数据中的冷数据，并将大于所述设定时间内的冷数据增加需要移动的标记，即move_flag=1。

进一步的，所述步骤S3进一步具体包括：步骤S31、读取已经标记好的move_flag=1的订单数据，即为所有需要分离的数据；

步骤S32、在冷数据库中插入move_flag=1的订单数据，插入冷数据库前需要对订单号进行幂等性校验，以保证没有重复插入数据；

步骤S33、从订单数据库中删除被成功移入冷数据库的订单数据。

进一步的，所述步骤S4进一步具体为：在订单查询页进行数据查询，先会根据查询条件读取支付系统的redis缓存，如果redis缓存不存在要查询的数据，则会直接查询订单数据库，仅查询所述设定时间以内的订单数据，把得到的数据存入redis缓存，以便下次查询；如果要查询所述设定时间之前的订单数据，则需要进入历史订单查询页面，在历史订单查询页面，会把查询指向冷数据库，在冷数据库中进行查询。

本发明还提供了一种支付系统根据订单时间进行数据冷热分离系统，所述系统包括数据判定模块、创建任务模块、数据分离模块、以及查询模块；

所述数据判定模块，用于对支付系统订单数据库中的订单数据进行设定为冷数据或者热数据；

所述创建任务模块，用于设定一个定时任务，触发冷热数据分离；

所述数据分离模块，设定一冷数据库，将支付系统订单数据库中标记为冷数据的订单数据移入到冷数据库中；

所述查询模块，用于在订单查询页中进行冷热数据的查询使用。