[发明专利]日志的缓存方法、装置以及计算机设备在审
申请号: | 202011249541.X | 申请日: | 2020-11-10 |
公开(公告)号: | CN112364163A | 公开(公告)日: | 2021-02-12 |
发明(设计)人: | 袁康 | 申请(专利权)人: | 平安普惠企业管理有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/2455 |
代理公司: | 深圳市明日今典知识产权代理事务所(普通合伙) 44343 | 代理人: | 王杰辉;熊成龙 |
地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 缓存 方法 装置 以及 计算机 设备 | ||
本发明提供了一种日志的缓存方法、装置以及计算机设备,其中,方法包括:检测实时日志的数量是否达到了预设数量;若达到了预设数量,则检测各所述实时日志的类别;根据各所述实时日志的类别,通过对应所述类别的消息队列接收对应的所述实时日志,并根据所述实时日志的申请号对所述实时日志设定TOKEN标签;将各所述消息队列分别发送至对应类别的日志处理模型中进行解耦处理,得到解耦后的目标日志;将所述目标日志保存缓存数据库中。本发明的有益效果:实现对实时日志的分类高效处理,加快了缓存数据库处理单个实时日志的速度,另外,通过对应的日志处理模型进行处理,也能提高处理结果的精确度。
技术领域
本发明涉及数据处理领域,特别涉及一种日志的缓存方法、装置以及计算机设备。
背景技术
目前,很多公司的风控系统,日志采用批量实时提交的方式存储到数据库,当系统并发高时产生大量日志,会占用大量数据库连接,数据库响应变慢,接口响应随之变慢,降低系统性能。目前,针对大量日志的处理方法仅仅是增加服务器的处理性能,但是仍未能很好的解决系统性能降低的问题,当产生大量日志时,进行日志记录会产生堵塞,从而使系统性能降低。因此亟需一种日志的缓存方法。
发明内容
本发明的主要目的为提供一种日志的缓存方法、装置以及计算机设备,旨在解决当产生大量日志时,进行日志记录会产生堵塞的问题。
本发明提供了一种日志的缓存方法,包括:
检测实时日志的数量是否达到了预设数量;
若达到了预设数量,则检测各所述实时日志的类别;
根据各所述实时日志的类别,通过对应所述类别的消息队列接收对应的所述实时日志,并根据所述实时日志的申请号对所述实时日志设定TOKEN标签;
将各所述消息队列分别发送至对应类别的日志处理模型中进行解耦处理,得到解耦后的目标日志;其中,所述目标日志携带有所述实时日志对应的所述TOKEN标签;
根据所述TOKEN标签将所述目标日志保存在对应所述申请号的缓存数据库中。
进一步地,所述检测各所述实时日志的类别的步骤,包括:
将所述实时日志输入至预设的向量机中,得到对应固定维度的实时日志向量X=(x1,x2,…,xi,…,xn);
根据公式计算所述实时日志向量与每个消息队列对应的预存类别向量之间的匹配度;其中,所述Y为各消息队列对应的预存类别向量的多维坐标,Y=(y1,y2,…,yi,…,yn),xi表示实时日志向量中第i维的数值,yi表示消息队列对应的预存类别向量中第i维的数值,si为第i维数据所对应的系数,p为设定的参数值;
根据所述匹配度得到各所述实时日志的类别。
进一步地,所述将各所述消息队列分别发送至对应类别的日志处理模型中进行解耦处理,得到解耦后的目标日志的步骤,包括:
获取接收了所述实时日志后的各消息队列的长度,并根据各消息队列的长度建立长度集合;
根据公式Δdmax=max(|li-lj|)计算所述长度集合中最大长度差;其中,所述Δdmax表示所述最大长度差,li和lj分别表示所述长度集合中任意两个不同的消息队列长度,max(|li-lj|)表示|li-lj|计算得到的最大值;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安普惠企业管理有限公司,未经平安普惠企业管理有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011249541.X/2.html,转载请声明来源钻瓜专利网。
- 上一篇:资源匹配方法、装置和计算机设备
- 下一篇:一种绿色节能市政道路结构