[发明专利]一种基于Hadoop平台的物联网日志处理方法和装置有效
| 申请号： | 201510996886.4 | 申请日： | 2015-12-24 |
| 公开（公告）号： | CN105608203B | 公开（公告）日： | 2019-09-17 |
| 发明（设计）人： | 廖召正 | 申请（专利权）人： | TCL集团股份有限公司 |
| 主分类号： | G06F16/18 | 分类号： | G06F16/18;G06F16/28;H04L29/08 |
| 代理公司： | 深圳中一专利商标事务所 44237 | 代理人： | 彭海民 |
| 地址： | 516006 广东省*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供一种基于Hadoop平台的物联网日志处理方法和装置，以提高系统输出的日志的可分析性，并满足业务报表的周期性输出需求。所述方法包括：配置物联网日志的日志格式并按照配置的日志格式采集物联网日志；将采集到的物联网日志按照类别标识字符串标识的类别进行分类聚合并将分类聚合后的物联网日志的存储路径记录至日志备忘表；定时更新日志备忘表或将分类聚合后的物联网日志中需要形成数据报表的物联网日志加载至hive表的日期分区。本发明提供的技术方案使得输出的日志的可分析性显著增强，能够满足需要周期性输出分析结果的业务的需求。 | ||
| 搜索关键词： | 一种 基于 hadoop 平台 联网 日志 处理 方法 装置 | ||
【主权项】：
1.一种基于Hadoop平台的物联网日志处理方法，其特征在于，所述方法包括：配置物联网日志的日志格式并按照所述配置的日志格式采集物联网日志，所述日志格式为一条物联网日志包括类别标识字符串和日志内容字符串，所述日志内容字符串为json格式的日志内容字符串或者由任意列纯字符串值组成且各列纯字符串之间用分隔符隔开的日志内容字符串；将采集到的所述物联网日志按照所述类别标识字符串标识的类别进行分类聚合并将分类聚合后的物联网日志的存储路径记录至日志备忘表；定时更新所述日志备忘表或将所述分类聚合后的物联网日志中需要形成数据报表的物联网日志加载至hive表的日期分区。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于TCL集团股份有限公司，未经TCL集团股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201510996886.4/，转载请声明来源钻瓜专利网。
