[发明专利]一种数据处理方法和装置在审
申请号: | 202110153654.8 | 申请日: | 2021-02-04 |
公开(公告)号: | CN113760179A | 公开(公告)日: | 2021-12-07 |
发明(设计)人: | 顾书宽 | 申请(专利权)人: | 北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F9/50 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 李召春;王志远 |
地址: | 100176 北京市北京经济技术*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 | ||
本发明公开了一种数据处理方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:响应于业务服务器发起的数据处理请求,获取存储实例列表;其中,数据处理请求包括数据读取请求和/或数据写入请求;判断存储实例列表中是否包括多个存储实例;其中,存储实例指示了业务服务器与存储装置之间的对应关系;若是,确定数据处理请求对应的待处理数据的存储键值,获取存储配置信息,根据存储键值和存储配置信息确定目标存储实例,并将数据处理请求发送至目标存储实例指示的存储装置,以使得存储装置执行相应的数据处理。该实施方式能够均衡各存储装置的负载,缩短数据处理耗时,降低系统风险,提高数据处理效率,提升用户体验。
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据处理方法和装置。
背景技术
分布式缓存系统由于支持多种数据类型、支持扩容,常用于解决数据库服务器和Web服务器之间的瓶颈。但是随着互联网业务的不断增长,一个分布式缓存系统集群常无法满足业务需求,需要扩充为两个甚至更多的集群。如何将业务服务器的请求动态路由到相应的分布式缓存系统中,以实现数据处理,是目前亟需解决的问题。
现有技术中至少存在如下问题:
现有的数据处理方法中,由于业务服务器的访问请求需统一发送至某一存储装置,或者分别轮询各存储装置后再进行发送,导致存储装置的负载能力不均衡、处理耗时长,存在系统风险高,易造成宕机,数据处理效率低、用户体验差等技术问题。
发明内容
有鉴于此,本发明实施例提供一种数据处理方法和装置,能够均衡各存储装置的负载,缩短数据处理耗时,降低系统风险,提高数据处理效率,提升用户体验。
为实现上述目的,根据本发明实施例的第一方面,提供了一种数据处理方法,包括:
响应于业务服务器发起的数据处理请求,获取存储实例列表;其中,数据处理请求包括数据读取请求和/或数据写入请求;
判断存储实例列表中是否包括多个存储实例;其中,存储实例指示了业务服务器与存储装置之间的对应关系;
若是,确定数据处理请求对应的待处理数据的存储键值,获取存储配置信息,根据存储键值和存储配置信息确定目标存储实例,并将数据处理请求发送至目标存储实例指示的存储装置,以使得存储装置执行相应的数据处理。
进一步地,确定数据处理请求对应的待处理数据的存储键值,还包括:获取业务需求,根据业务需求和待处理数据的数据类型确定存储键值。
进一步地,将数据处理请求发送至存储实例指示的存储装置,还包括:
根据数据处理请求对应的业务服务器编号,以及存储实例,确定相应的存储装置,以将数据处理请求发送至该存储装置。
进一步地,存储配置信息包括下列信息中的至少一种:业务服务器配置信息、存储键值配置信息、存储装置配置信息。
进一步地,若存储实例列表中包括多个存储实例,根据存储键值和存储配置信息确定目标存储实例,还包括:
为业务服务器配置信息、存储键值配置信息、存储装置配置信息设置匹配优先级;
将存储键值与存储配置信息中多个信息的匹配优先级依次进行匹配以确定目标存储实例。
进一步地,方法还包括:获取多个存储装置的当前负载能力,根据当前负载能力确定目标存储装置,将数据处理请求发送至目标存储装置。
进一步地,存储装置为分布式缓存系统集群,方法还包括:
根据分布式缓存系统集群内多个分布式缓存系统的负载能力,调整数据处理请求对应的分布式缓存系统。
根据本发明实施例的第二方面,提供了一种数据处理装置,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司,未经北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110153654.8/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种消息处理方法和装置
- 下一篇:一种防眩光管道内窥镜