[发明专利]一种对彩信数据进行处理的方法及分布式缓存系统

说明书

本发明公开了一种对彩信数据进行处理的方法及分布式缓存系统，所述方法应用于包含彩信系统及分布式缓存系统的网络结构中，包括：所述分布式缓存系统采用全索引扫描(IFS)存储方式对所述彩信系统发来的彩信数据进行存储。所述分布式缓存系统，包括：接收模块，用于接收彩信系统发来的彩信数据；处理模块，用于采用全索引扫描(IFS)存储方式将所述接收模块接收到的彩信数据写入到存储模块中；所述存储模块，用于保存所述处理模块写入到本模块中的彩信数据。本发明使用了分布式缓存系统读写效率较高的IFS存储模式，存储效率与NAS设备相当，但成本更加低廉。

技术领域

本发明涉及分布式数据存储技术领域，尤其涉及一种对彩信数据进行处理的方法及分布式缓存系统。

背景技术

云计算(Cloud Computing)是网格计算(Grid Computing)、分布式计算(Distributed Computing)、并行计算(Parallel Computing)、效用计算(UtilityComputing)网络存储(Network Storage Technologies)、虚拟化(Virtualization)、负载均衡(Load Balance)等传统计算机技术和网络技术发展融合的产物。它旨在通过网络把多个成本相对较低的计算实体整合成一个具有强大计算能力的系统。分布式缓存是云计算范畴中的一个领域，其作用是提供海量数据的分布式存储服务以及高速读写访问的能力，具有很强的可扩展性，且对于服务器硬件要求非常低，可以大大降低硬件成本。

现有的彩信系统中，底层的存储使用的是传统的NAS(Network-AttachedStorage，网络附加存储)设备，但传统的NAS设备面临着硬件成本和许可证昂贵的问题。

发明内容

本发明所要解决的技术问题是提供一种对彩信数据进行处理的方法及分布式缓存系统，以克服现有彩信系统中硬件使用成本过高的缺陷。

为解决上述问题，本发明提供了一种对彩信数据进行处理的方法，应用于包含彩信系统及分布式缓存系统的网络结构中，所述方法包括：

所述分布式缓存系统采用全索引扫描(IFS)存储方式对所述彩信系统发来的彩信数据进行存储。

进一步地，所述方法具体包括：

在接收到所述彩信系统发来的携带有待写入的彩信数据及所述彩信数据对应的关键字(key)值的写数据命令时，所述分布式缓存系统先根据所述key值的哈希值在哈希表中查找对应的Keynode的存储地址信息；其中，每一条Keynode为包含所述分布式缓存系统中保存的一条彩信数据的key值、key的长度信息、该彩信数据的长度及该彩信数据在数据文件中的存储位置信息的记录；

如果未找到，则将所述待写入的彩信数据存储到当前活动的数据文件中，并在内存中相应地增加一条Keynode，将所述Keynode的存储地址信息与所述彩信数据对应的key值的对应关系写入所述哈希表中。

进一步地，所述方法还包括：

如果所述分布式缓存系统根据所述key值的哈希值在哈希表中查找到对应的Keynode的存储地址信息，则根据查找的Keynode的存储地址信息找到相应的Keynode，在判断出该条Keynode中包含的key值与所述待写入的彩信数据对应的key值不同时，根据该条Keynode中包含的彩信数据在数据文件中的存储位置信息，使用所述待写入的彩信数据对该存储位置存储的数据进行更新，并相应的更新该Keynode中的信息。

进一步地，

当待新增的Keynode中的key值超过预配置的key值最大字节数时，所述将所述Keynode的存储地址信息与所述彩信数据对应的key值的对应关系写入所述哈希表中，具体包括：