[发明专利]一种数据处理方法、装置、电子设备和存储介质在审
申请号: | 202010920225.4 | 申请日: | 2020-09-03 |
公开(公告)号: | CN111984202A | 公开(公告)日: | 2020-11-24 |
发明(设计)人: | 冯世伟 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 熊永强 |
地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 电子设备 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
获取磁盘的访问频次;
在所述磁盘的访问频次低于预设访问频次时,停止从第一任务队列中将第一字节序写入第一缓存;
从所述第一任务队列中将所述第一字节序写入第二缓存,在所述第一任务队列中所述第一字节序的位置位于第二字节序的位置之后,且在所述第一任务队列中所述第一字节序的位置与所述第二字节序的位置相邻,所述第二字节序为所述第一缓存中的最后一个字节序;
在所述第一缓存中存储的字节序均写入所述磁盘后,将所述第二缓存中存储的字节序写入所述磁盘。
2.根据权利要求1所述的方法,其特征在于,所述在所述磁盘的访问频次低于预设访问频次时,停止从第一任务队列中将第一字节序写入第一缓存之前,所述方法还包括:
获取N个区块,所述N为大于1的整数;
在序列化进程上并行对所述N个区块进行序列化,得到N个字节序,所述N个区块一一对应所述N个字节序;
将所述N个字节序存入第二任务队列;
检测排序进程是否处于忙碌状态;
若否,则从所述第二任务队列中获取所述N个字节序;
获取所述N个区块对应的N个区块高度;
在所述排序进程上按照所述N个区块高度从小到大的顺序对所述N个字节序进行排序,得到排序后的N个字节序;
将所述排序后的N个字节序存入所述第一任务队列。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
若是,则在所述排序进程处于空闲状态时从所述第二任务队列中获取所述N个字节序;
获取所述N个区块对应的N个区块高度;
在所述排序进程上按照所述N个区块高度从小到大的顺序对所述N个字节序进行排序,得到排序后的N个字节序;
将所述排序后的N个字节序存入所述第一任务队列。
4.根据权利要求1-3任意一项所述的方法,其特征在于,所述在所述第一缓存中存储的字节序均写入所述磁盘后,将所述第二缓存中存储的字节序写入所述磁盘,包括:
获取第三任务队列的长度,所述第三任务队列中位于队列头的字节序将写入所述磁盘,所述第三任务队列用于存放所述第一缓存中存储的字节序;
根据所述磁盘的访问频次,调整第四任务队列的长度,所述第四任务队列的长度小于所述第三任务队列的长度,所述第四任务队列用于存放所述第二缓存中存储的字节序;
在所述第三任务队列中存放的字节序均写入所述磁盘后,将所述第四任务队列中存放的字节序写入所述磁盘。
5.根据权利要求4所述的方法,其特征在于,所述第三任务队列包括至少一个任务队列P,所述至少一个任务队列P中的每个任务队列均用于存放所述第一缓存中存储的字节序;所述至少一个任务队列P包括任务队列P1、任务队列P2、任务队列P3和任务队列P4,位于任务队列P1队列头的字节序是从第一缓存中读取的第一个字节序,位于任务队列P2队列尾的字节序是从第一缓存中读取的最后一个字节序,第三字节序和第四字节序在所述第一缓存中相邻,且在所述第一缓存中所述第三字节序位于所述第四字节序之前,位于所述任务队列P3队列尾的字节序为所述第三字节序,位于所述任务队列P4队列头的字节序为所述第四字节序,在所述将所述第四任务队列中存放的字节序写入所述磁盘之前,所述方法还包括:
在将所述任务队列P1存入的字节序均写入所述磁盘后,将所述任务队列P3中存入的字节序写入所述磁盘;
在将所述任务队列P4中存入的字节序均写入所述磁盘后,将所述任务队列P2中存入的字节序写入所述磁盘。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010920225.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:户外用设计绘画装置
- 下一篇:一种用于烘焙食品裱花操作的食品加工装置