[发明专利]数据存储方法及系统

摘要

本发明提供一种数据存储方法及系统，该方法包括：若第一真实服务器在数据传输的过程中出现中断，则控制第一真实服务器不再将当前数据包写入消息队列；根据第一真实服务器最近一次写入的数据包在消息队列中的位置，获取最近一次写入的数据包的偏移量后加1，获取第一偏移量；将第一偏移量反馈给客户端，以供客户端将第一偏移量所属的数据包发送给服务端，服务端的第二真实服务器将接收的数据包以追加的方式写入消息队列中；通过第一Spark Streaming服务器从消息队列中读取第一偏移量所属的数据包，对第一偏移量所属的数据包进行处理，将处理后的数据包存储到数据存储系统。本发明实现保证数据传输的完整性的同时，提高传输效率。