[发明专利]数据处理的方法、装置、电子设备和存储介质在审
申请号: | 202210224784.0 | 申请日: | 2022-03-07 |
公开(公告)号: | CN114661761A | 公开(公告)日: | 2022-06-24 |
发明(设计)人: | 高志立;谭高威 | 申请(专利权)人: | 京东城市(北京)数字科技有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/23;G06F16/2457 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 张春晓;郝红玉 |
地址: | 100086 北京市海淀区知*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 存储 介质 | ||
本发明公开了数据处理的方法、装置、电子设备和存储介质,涉及计算机技术领域。该方法的一具体实施方式包括:接收数据请求,获取数据请求中的数据标识,以从缓存中查询对应的目标数据,返回目标数据,并触发目标数据的更新操作;响应于更新操作,获取目标数据的过期时间戳和更新阈值,其中,更新阈值基于目标数据的属性参数,从过期时间戳对应的更新时间区间中确定;计算过期时间戳与当前时间之间的时长,确定时长小于更新阈值,调用预设的数据更新线程对缓存中的目标数据进行更新。该实施方式能够解决高并发场景下缓存中数据到达过期时间再数据更新,会降低数据请求和响应的效率,导致业务系统性能下降的问题。
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据处理的方法、装置、电子设备和存储介质。
背景技术
随着互联网高速发展,高并发成为业务系统对业务数据处理时经常遇到的场景,而过期刷新缓存机制是高并发场景下一种常用手段。过期刷新缓存机制是指缓存中数据存储时设置过期时间,到达过期时间时对数据进行更新。但是,对业务系统的高并发压测时发现,缓存中数据到达过期时间后,即使下游数据源充分优化,使数据能够及时完成更新,还是会降低数据请求和响应的效率,从而导致业务系统的性能下降。
发明内容
有鉴于此,本发明实施例提供一种数据处理的方法、装置、电子设备和存储介质,能够解决高并发场景下缓存中数据到达过期时间进行更新的方式,会降低数据请求和响应的效率,导致业务系统性能下降的问题。
为实现上述目的,根据本发明实施例的一个方面,提供了一种数据处理的方法。
本发明实施例的一种数据处理的方法包括:接收数据请求,获取所述数据请求中的数据标识,以从缓存中查询对应的目标数据,返回所述目标数据,并触发所述目标数据的更新操作;响应于所述更新操作,获取所述目标数据的过期时间戳和更新阈值,其中,所述更新阈值为基于所述目标数据的属性参数,从所述过期时间戳对应的更新时间区间中确定的;计算所述过期时间戳与当前时间之间的时长,确定所述时长小于所述更新阈值,调用预设的数据更新线程对所述缓存中的目标数据进行更新。
在一个实施例中,在触发所述目标数据的更新操作之前,还包括:
生成所述目标数据的过期时间戳,查询所述过期时间戳所属的时间段,以将所述过期时间戳所属时间段对应的更新时间区间,确定为所述过期时间戳对应的更新时间区间,其中,所述时间段包括空闲时间段和非空闲时间段;
获取所述目标数据的属性参数,以基于所述属性参数从所述过期时间戳对应的更新时间区间中确定所述更新阈值。
在又一个实施例中,基于所述属性参数从所述过期时间戳对应的更新时间区间中确定所述更新阈值,包括:
基于所述目标数据的业务等级、所述目标数据的获取时长和/或所述目标数据的优先级,从所述更新时间区间中查询对应的更新时间,以确定为所述更新阈值。
在又一个实施例中,基于所述属性参数从所述过期时间戳对应的更新时间区间中确定所述更新阈值,包括:
调用预设的转换模型,计算所述数据标识对应的转换编码,以基于转换编码,从所述更新时间区间中确定所述更新阈值。
在又一个实施例中,所述调用预设的数据更新线程对所述缓存中的目标数据进行更新,包括:
获取更新任务锁;
响应于更新任务锁获取成功,调用预设的数据更新线程对所述缓存中的目标数据进行更新;或者,
响应于更新任务锁获取失败,执行预设的更新重试操作。
在又一个实施例中,所述更新重试操作,包括:
生成所述目标数据的更新请求,将所述更新请求存储至更新重试队列;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东城市(北京)数字科技有限公司,未经京东城市(北京)数字科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210224784.0/2.html,转载请声明来源钻瓜专利网。