[发明专利]数据处理方法及装置在审
| 申请号： | 202010270178.3 | 申请日： | 2020-04-08 |
| 公开（公告）号： | CN111400390A | 公开（公告）日： | 2020-07-10 |
| 发明（设计）人： | 梅亚雄;谢豆 | 申请（专利权）人： | 上海东普信息科技有限公司 |
| 主分类号： | G06F16/25 | 分类号： | G06F16/25;G06F16/21;G06F16/22 |
| 代理公司： | 苏州领跃知识产权代理有限公司 32370 | 代理人： | 王宁 |
| 地址： | 201702 上海市青浦区*** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 数据处理 方法 装置 | ||
1.一种数据处理方法，其特征在于，所述方法包括：
将存储系统中的数据存入待处理队列；
将所述待处理队列中的数据组合成一个或多个数据集合；每个所述数据集合包括多条数据；
调用接口，批量处理所述数据集合中的数据。
2.根据权利要求1所述的数据处理方法，其特征在于，所述调用接口，批量处理所述数据集合中的数据，包括：
调用所述接口，通过多个进程批量处理所述数据集合中的数据。
3.根据权利要求1所述的数据处理方法，其特征在于，所述方法还包括：
将处理失败的数据重新存入所述待处理队列并延时处理。
4.根据权利要求1所述的数据处理方法，其特征在于，所述方法还包括：
将处理失败的数据对应的错误类型存储至所述存储系统。
5.根据权利要求1所述的数据处理方法，其特征在于，所述方法还包括：
将处理成功的数据在所述存储系统中的处理状态调整为处理成功；
将处理失败的数据在所述存储系统中的处理状态调整为处理失败。
6.根据权利要求5所述的数据处理方法，其特征在于，所述方法还包括：
将数据导入待存储队列；
若所述存储系统中不存在所述待存储队列中的数据对应的标识，则将所述待存储队列中的数据存储至所述存储系统，并将所述待存储队列中的数据在所述存储系统中的处理状态设置为未处理。
7.根据权利要求6所述的数据处理方法，其特征在于，所述方法还包括：
通过多个进程判断所述存储系统中是否存在所述待存储队列中的数据对应的标识。
8.根据权利要求6所述的数据处理方法，其特征在于，所述方法还包括：
将出现异常导致存储失败的数据重新存入所述待存储队列并延时处理。
9.根据权利要求6所述的数据处理方法，其特征在于，所述将存储系统中的数据存入待处理队列，包括：
将所述存储系统中处理状态是未处理或者处理失败的数据存入所述待处理队列。
10.一种数据处理装置，其特征在于，所述数据处理装置包括：
处理存入模块，用于将存储系统中的数据存入待处理队列；
数据组合模块，用于将所述待处理队列中的数据组合成一个或多个数据集合；每个所述数据集合包括多条数据；
批量处理模块，用于调用接口，批量处理所述数据集合中的数据。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于上海东普信息科技有限公司，未经上海东普信息科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/202010270178.3/1.html，转载请声明来源钻瓜专利网。
