[发明专利]一种数据处理方法、装置、服务器及存储介质在审
申请号: | 201910689074.3 | 申请日: | 2019-07-29 |
公开(公告)号: | CN112306369A | 公开(公告)日: | 2021-02-02 |
发明(设计)人: | 董磊;陈敏 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳翼盛智成知识产权事务所(普通合伙) 44300 | 代理人: | 黄威 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 服务器 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
获取待处理数据;
确定所述待处理数据的等级;
为所述待处理数据分配缓存空间和缓存时间;
根据所述等级将所述待处理数据存入所述缓存空间;
根据所述缓存时间将所述待处理数据,按照等级从高至低的顺序依次从所述缓存空间中转存至预设存储空间。
2.根据权利要求1所述的数据处理方法,其特征在于,所述确定所述待处理数据的等级包括:
获取所述待处理数据中携带的标识;
根据所述标识确定所述待处理数据的类型;
根据所述类型确定所述待处理数据的等级。
3.根据权利要求1所述的数据处理方法,其特征在于,所述为所述待处理数据分配缓存空间和缓存时间包括:
获取所述缓存空间的时间区间,以及所述待处理数据的延迟时间;
根据所述时间区间和延迟时间为所述待处理数据分配缓存空间和缓存时间。
4.根据权利要求3所述的数据处理方法,其特征在于,所述根据所述时间区间和延迟时间为所述待处理数据分配缓存空间和缓存时间包括:
构建由多个缓存空间形成环形缓存队列;
为所述环形缓存队列中的每个缓存空间设置时间区间;
获取所述待处理数据的延迟时间,以及获取所述环形缓存队列中当前正在转存数据的缓存空间的序号;
根据所述时间区间、延迟时间和序号为所述待处理数据分配缓存空间和缓存时间。
5.根据权利要求1所述的数据处理方法,其特征在于,所述根据所述缓存时间将所述待处理数据,按照等级从高至低的顺序依次从所述缓存空间中转存至预设存储空间包括:
当所述缓存时间达到时,按照等级从高至低的顺序依次从所述缓存空间中提取所述待处理数据,得到目标数据;
对所述目标数据进行解析,得到解析后的目标数据;
将所述解析后的目标数据按照预设速率发送到预设存储空间。
6.根据权利要求5所述的数据处理方法,其特征在于,所述将所述解析后的目标数据按照预设速率发送到预设存储空间之后,所述方法还包括:
当所述缓存时间结束时,判断所述缓存空间中是否存在未被提取的待处理数据;
若存在,则将所述未被提取的待处理数据存储至磁盘;
按照等级从高至低的顺序对所述磁盘中的待处理数据进行解析,并将解析后的数据按照预设速率发送到预设存储空间。
7.根据权利要求1至6任一项所述的数据处理方法,其特征在于,所述获取待处理数据包括:
接收客户端或其他服务器上报的抽样数据、日志数据或性能数据。
8.一种数据处理装置,其特征在于,包括:
获取单元,用于获取待处理数据;
确定单元,用于确定所述待处理数据的等级;
分配单元,用于为所述待处理数据分配缓存空间和缓存时间;
存储单元,用于根据所述等级将所述待处理数据存入所述缓存空间;
转存单元,用于根据所述缓存时间将所述待处理数据,按照等级从高至低的顺序依次从所述缓存空间中转存至预设存储空间。
9.一种服务器,其特征在于,包括处理器和存储器,所述存储器中存储有计算机程序,所述处理器调用所述存储器中的计算机程序时执行如权利要求1至7任一项所述的数据处理方法。
10.一种存储介质,其特征在于,所述存储介质用于存储计算机程序,所述计算机程序被处理器加载以执行权利要求1至7任一项所述的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910689074.3/1.html,转载请声明来源钻瓜专利网。