[发明专利]以消息的方式写入日志数据的方法及装置在审
申请号: | 201711478848.5 | 申请日: | 2017-12-29 |
公开(公告)号: | CN108197015A | 公开(公告)日: | 2018-06-22 |
发明(设计)人: | 罗赛鸣;张鑫 | 申请(专利权)人: | 天脉聚源(北京)科技有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34 |
代理公司: | 北京尚伦律师事务所 11477 | 代理人: | 张亮 |
地址: | 100007 北京市东城*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 写入 服务器 对象标记 日志数据 宕机 日志缓存 日志信息 服务器发送消息 定义服务器 参数指定 日志 分区 | ||
本发明涉及一种以消息的方式写入日志数据的方法及装置,其中的所述方法包括:定义服务器的日志缓存地址;对对象标记的参数进行定义;通过定义后的对象标记向服务器发送消息;结合服务器的日志缓存地址,通过对对象标记的参数指定的方式在服务器的一个分区写入日志。本发明的有益效果为:通过消息的方式快速而且不会造成宕机地将日志数据写入Kafka服务器,解决对Kafka服务器中快速而且不会造成宕机地写入日志信息的问题题,实现对Kafka服务器中快速而且不会造成宕机地写入日志信息的效果。
技术领域
本发明实施例涉及互联网信息技术领域,尤其涉及一种以消息的方式写入日志数据的方法及装置。
背景技术
随着电子商务技术的发展,网络的后端服务器承载的压力也越来越大,同时需要处理的“数据”也呈几何级增长,实时准确的收集、传输、计算海量日志随之成为电子商务中的迫切要求,而日志数据对于服务器而言是一项重要的数据,如何能够在对Kafka服务器中快速而且不会造成宕机地写入日志信息,成为目前业内需要解决的一个技术问题。
发明内容
为了克服相关技术中存在的问题,本发明提供一种以消息的方式写入日志数据的方法及装置,以实现通过消息的方式快速而且不会造成宕机地将日志数据写入Kafka服务器。
第一方面,本发明实施例提供了一种以消息的方式写入日志数据的方法,所述方法包括:
定义服务器的日志缓存地址;
对对象标记的参数进行定义;
通过定义后的对象标记向服务器发送消息;
结合服务器的日志缓存地址,通过对对象标记的参数指定的方式在服务器的一个分区写入日志。
结合另一方面,在另一方面的一种可能的实施方式中,所述对对象标记的参数进行定义,包括:
将对象标记转换为字符串;
在所述服务器中定义消息的写入路由;
在通过定义后的对象标记向服务器发送消息时,包括:
在定义后的对象标记的其中一个参数为空时,在一段时间内向所述服务器的同一个物理分组写入日志;
在定义后的对象标记的其中一个参数为忙时,指定服务器的一个路由用于通过消息的方式写入日志信息。
结合另一方面,在另一方面的一种可能的实施方式中,所述方法还包括:
当服务器用于通过消息的方式写入日志信息的路由发生改变时,根据改变后的路由更新所述写入服务器的物理分组。
结合另一方面,在另一方面的一种可能的实施方式中,所述方法还包括:
对于获取的日志消息,通过对象标识配置所述日志消息,将配置项以对象标记文件的形式缓存至服务器的目标日志缓存地址;
获取目标日志缓存地址中的修改后的对象标记文件,将对象标识恢复为日志消息,并在所述服务器的一个物理分组存储所述恢复后的日志消息。
第二方面,本发明还提供了一种以消息的方式写入日志数据的装置,所述装置包括:
第一定义模块,用于定义服务器的日志缓存地址;
第二定义模块,用于对对象标记的参数进行定义;
发送模块,用于通过定义后的对象标记向服务器发送消息;
写入模块,用于结合服务器的日志缓存地址,通过对对象标记的参数指定的方式在服务器的一个分区写入日志。
上述的装置,所述第二定义模块,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天脉聚源(北京)科技有限公司,未经天脉聚源(北京)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711478848.5/2.html,转载请声明来源钻瓜专利网。