[发明专利]一种删除数据的方法及装置

摘要

本发明实施例公开了一种删除数据的方法及装置。该方法包括：读取配置文件，并判断运行模式是否正确；若所述运行模式正确，则选择SQL数据清洗规则或者rowkey数据清洗规则；按表名分组，并判断是否存在待删除数据分组；若存在待删除数据分组，则判断是否超过每次最大提交数，若否，则删除数据；若超过每次最大提交数，则分批次删除数据。本发明将要删除的数据的查询SQL配置到文件中，有助于解决在使用hadoop、solr等大数据存储技术时，删除数据步骤复杂的难题，大幅缩减了手工删除数据的工作量，提高工作效率；将SQL保存到文件中，当有新的清除规则时，只需要维护文件即可，避免重复性工作。

主权项

一种删除数据的方法，其特征在于，所述方法包括：读取配置文件，并判断运行模式是否正确；若所述运行模式正确，则选择SQL数据清洗规则或者rowkey数据清洗规则；按表名分组，并判断是否存在待删除数据分组；若存在待删除数据分组，则判断是否超过每次最大提交数，若否，则删除数据，并返回继续判断是否存在待删除数据分组；若超过每次最大提交数，则分批次删除数据，并返回继续判断是否存在待删除数据分组。