[发明专利]一种数据处理方法、装置和系统

说明书

本发明公开了一种数据处理方法、装置和系统，用以解决现有技术中本地磁盘阵列的磁盘利用率较低的问题。该方法包括：本地独立磁盘冗余阵列RAID卡向下挂的本地磁盘阵列中的第一本地磁盘写入数据后，读取用于计算所述第一本地磁盘的校验信息的全部数据；按照预先设置的校验算法对读取的全部数据进行校验计算，生成第一校验信息；将所述第一校验信息发送给网络RAID卡，指示所述网络RAID卡将所述第一校验信息存储在其下挂的网络磁盘阵列中；其中，所述本地RAID卡和所述网络RAID卡位于同一局域网中的不同存储设备中。

技术领域

本发明涉及业务支撑技术领域，尤其涉及一种数据处理方法、装置和系统

背景技术

独立磁盘冗余阵列（Redundant Arrays of Inexpensive Disks，RAID）简称磁盘阵列，是由很多价格较便宜的磁盘，组合成一个容量巨大的磁盘组，利用个别磁盘提供数据所产生加成效果提升整个磁盘系统效能。利用这项技术，将数据切割成许多区段，分别存放在各个磁盘上。

除此之外，一般的磁盘阵列都具有数据校验功能，其中数据校验功能是在本地数据发生损坏后，利用校验信息可以使损坏的数据得以恢复，从而保证本地数据的安全性。

目前校验信息和本地数据都是存储在本地磁盘中，这样就会大量浪费本地存储空间。比如在大规模并行处理计算机（Massive Parallel Processing，MPP）数据库集群系统中，如果采用四个磁盘的RAID5，那么校验信息要占总存储空间的四分之一。如果说需要存放300T的数据，那么本地集群需要有400T的存储空间。假如说每个磁盘可以存储1T的数据，那么就需要400个磁盘来满足要求。但是MPP数据库同时对磁盘的数量有严格的要求，如果说此MPP数据库超过300个磁盘集群的性能会严重下降或者说机柜只能放置300个磁盘，此时400个磁盘的话就不得不采用两个集群，这样集群的性能也会造成很严重的影响。

发明内容

本发明实施例提供一种数据处理方法、装置和系统，用以解决现有技术中本地磁盘阵列的磁盘利用率较低的问题。

本发明实施例采用以下技术方案：

本发明实施例提供了一种数据处理方法，包括：

本地独立磁盘冗余阵列RAID卡向下挂的本地磁盘阵列中的第一本地磁盘写入数据后，读取用于计算所述第一本地磁盘的校验信息的全部数据；

按照预先设置的校验算法对读取的全部数据进行校验计算，生成第一校验信息；

将所述第一校验信息发送给网络RAID卡，指示所述网络RAID卡将所述第一校验信息存储在其下挂的网络磁盘阵列中；其中，所述本地RAID卡和所述网络RAID卡位于同一局域网中的不同存储设备中。

可选的，将所述第一校验信息发送给网络RAID卡之前，所述方法还包括：

根据预先设置的所述本地磁盘阵列中的本地磁盘和所述网络磁盘阵列中的网络磁盘之间的映射关系，确定所述第一本地磁盘对应的第一网络磁盘；则

将所述第一校验信息发送给所述网络RAID卡，指示所述网络RAID卡将所述第一校验信息存储在其下挂的网络磁盘阵列中，具体包括：

将所述第一校验信息和所述第一网络磁盘的标识发送给所述网络RAID卡，指示所述网络RAID卡根据所述第一校验信息对所述第一网络磁盘进行更新。

可选的，所述方法还包括：

当所述本地磁盘阵列中的第二本地磁盘存储的数据损坏时，根据所述映射关系，确定所述第二本地磁盘对应的第二网络磁盘；

向所述网络RAID卡发送获取请求，所述获取请求中携带所述第二网络磁盘的磁盘标识，以便所述网络RAID卡能够从所述第二网络磁盘中获取第二校验信息并发送给所述本地RAID卡；