[发明专利]基于分布式内存和数据库的数据处理方法、装置和系统在审
申请号: | 201410384269.4 | 申请日: | 2014-08-06 |
公开(公告)号: | CN105335297A | 公开(公告)日: | 2016-02-17 |
发明(设计)人: | 刘晟东 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F12/02 | 分类号: | G06F12/02;G06F17/30 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 李辉 |
地址: | 英属开曼群岛大开曼*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 分布式 内存 数据库 数据处理 方法 装置 系统 | ||
本申请提供了一种基于分布式内存和数据库的数据处理方法、装置和系统,所述方法包括:接收用户触发的数据处理请求,依据预算标识判断存储当前预算数据的当前内存分片中的内存额度是否大于所述预算额度,如果是,则直接在当前内存分片中将所述内存额度扣减所述预算额度;如果否,则依据预算标识判断当前内存分片中存储的当前数据库DB剩余额度和内存额度之和是否大于所述预算额度,如果是,则依据当前DB剩余额度和内存额度扣减所述预算额度;将扣减所述预算额度的扣减记录存储至当前DB中。采用本申请的实施例,既能提升数据处理性能,满足高并发请求,并且也能节省DB的数量,从而节省成本。
技术领域
本申请涉及互联网领域,特别涉及一种基于分布式内存和数据库DB的数据处理方法、装置和系统。
背景技术
在互联网越来越发达的现在,越来越多的用户借助于互联网处理数据,例如,企业报表或者word文档等。再例如,也有很多用户通过服务器来对一些数据进行存储、管理或者更新等。如果数据量大,可以将数据存储到多个服务器的数据库中。例如,在电子商务中,假设对于在售产品的数量,其总量为100,那么如果每次对总量扣减1的话,在扣减100次之后,总量为零,将不再允许对该在售产品的数量的扣减。其中,在售产品的总量叫做“预算”。
在现有技术中,服务器在采用数据库DB(Database)来存储预算数据并对其进行处理时,一般分为两种方式,第一种方式为:通过一个DB的一条记录来存放预算数据,每次对该预算数据进行扣减时可以通过DB的SQL语句在同一个事务中进行,这种方式称为单DB方式。第二种方式为:将预算数据拆分到不同服务器的不同的DB中,每次对预算数据需要扣减时可以将扣减请求负载均衡到不同的DB上。例如,数量为1000的预算数据由分布在10个DB的10条记录存放,每条记录100;而一次数量为3的扣减操作会被路由到10个DB的其中一个(例如第二个)上,扣减后,第二个DB的预算余额变为97,剩余的9个DB中的9条记录的预算余额仍为100。
但是发明人发现现有技术存在以下问题:对于第一种单个DB的数据处理方式来说:由于读写都需要访问DB,所以对DB性能要求较高,特别是以磁盘作为存储介质的DB,而磁盘的读写性能相对较低,因此这种方式不能满足高并发的数据处理请求的需求。对于第二种多DB的分布式数据处理方式来说:多DB的分布式数据处理方式通过增加DB的数量解决了单DB性能过低的问题,可以满足高并发需求,但是需要使用大量的DB,就造成成本过高的现象。
发明内容
基于发明人发现的目前数据处理中存在的问题,本申请提供一种基于分布式内存和数据库的数据处理方法,用以解决现有技术中进行数据处理时采用单个DB进行数据处理导致的不能满足高并发请求的问题,同时也解决了采用大量的DB导致的成本过高的问题,从而在降低成本的同时,满足高并发请求的实际需求。进一步的,还能在服务器发生宕机的情况下,也能保证数据的一致性。
本申请还提供了基于分布式内存和数据库的数据处理装置及系统,用以保证上述方法在实际中的实现及应用。
为了解决上述问题,本申请公开了一种基于分布式内存和数据库的数据处理方法,该方法包括:
接收用户触发的数据处理请求,其中,所述数据处理请求包括:当前预算数据的预算标识和预算额度;
依据所述预算标识判断存储所述当前预算数据的当前内存分片中的内存额度是否大于所述预算额度,如果是,则直接在所述当前内存分片中将所述内存额度扣减所述预算额度;
如果否,则依据所述预算标识判断所述当前内存分片中存储的当前数据库剩余额度和所述内存额度之和是否大于所述预算额度,如果是,则依据所述当前数据库剩余额度和内存额度扣减所述预算额度;
将所述扣减所述预算额度的扣减记录存储至所述当前数据库中,所述当前数据库与所述当前内存分片对应保存相同预算标识的预算数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410384269.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据存储系统、方法及装置
- 下一篇:一种静态库测试方法及装置