[发明专利]一种数据处理方法及相关设备有效
申请号: | 201911225044.3 | 申请日: | 2019-12-03 |
公开(公告)号: | CN111177178B | 公开(公告)日: | 2023-06-06 |
发明(设计)人: | 刘真余;王亚晨 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/245;G06F16/2453;G06F16/2455 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 聂秀娜 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 相关 设备 | ||
本申请实施例提供了一种数据处理方法及相关设备,可以提高对物联网设备数据的查询效率,降低查询时延。该方法包括:获取结构化查询语言SQL语句,所述SQL语句为所述目标设备对应的SQL语句;对所述SQL语句进行预处理,得到目标SQL语句;根据所述目标SQL语句对目标边缘数据库进行查询,以得到所述SQL语句对应的目标数据,所述目标边缘数据库为云端服务器对应的至少两个边缘数据库中的一个,且所述目标设备与所述目标边缘数据库相对应;根据所述目标数据生成所述SQL语句对应的目标查询结果;输出所述目标查询结果。
技术领域
本申请涉及物联网领域,尤其涉及一种数据处理方法及相关设备。
背景技术
目前存储设备数据主要有两种方式,一种是设备通过网络上传到应用服务器或云端,一种是数据暂时存储在设备端,积累到一定的数据量后打包上传到应用服务器或云端。
存储在应用服务器主要采用关系型数据库和时序数据库,存储在设备端的主要采用嵌入式数据库。数据库主要提供数据的存储与业务查询功能,物联网场景的业务主要包括执行规则引擎流程、滑动窗口查询、异常数据分析、自动报表等,因此对时序数据的分组聚合查询有很高的要求。
关系型数据库对时序数据类型的分组、排序、聚合查询效率较低,查询耗时长。当数据量越大,查询越慢,导致业务延时越大,普通时序数据库消耗CPU和内存大,嵌入式数据库对物联网设备的高并发写入支持较差。
发明内容
本申请提供了一种数据处理方法及相关设备,可以提高物联网中设备的设备数据的查询效率,降低查询时延。
本申请实施例第一方面提供一种数据处理方法,应用于物联网系统,包括:
获取结构化查询语言SQL语句,所述SQL语句为所述目标设备对应的SQL语句,所述目标设备为所述物联网系统中的设备;
对所述SQL语句进行预处理,得到目标SQL语句;
根据所述目标SQL语句对目标边缘数据库进行查询,以得到所述SQL语句对应的目标数据,所述目标边缘数据库为云端服务器对应的至少两个边缘数据库中的一个,且所述目标设备与所述目标边缘数据库相对应;
根据所述目标数据生成所述SQL语句对应的目标查询结果;
输出所述目标查询结果。
可选地,所述方法还包括:
实时获取所述目标设备对应的包含时序的目标设备数据;
将所述目标设备数据按照第一预设规则存储至所述目标边缘数据库。
可选地,所述目标边缘数据库包含磁盘存储区,所述将所述目标设备数据按照第一预设规则存储至所述目标边缘数据库包括:
将所述目标设备数据按照数据块格式以及时间关键字递增排列的方式存储至所述磁盘存储区,其中,所述磁盘存储区中的每个数据块按列存储,且相同类型的设备数据存储在所述磁盘存储区中的同一个数据区域。
可选地,所述目标边缘数据库包含内存存储区,所述将所述目标设备数据按照预设规则存储至所述目标边缘数据库包括:
将所述目标设备数据存储至日志缓存区,所述日志缓存区为所述内存存储区中的第一特定缓存区域;
当达到第一预设条件时,将所述日志缓存区中的设备数据存储至所述磁盘存储区。
可选地,所述方法还包括:
将所述目标设备数据存储至目标缓存区,所述目标缓存区还存储有所述云端服务器下发的所述目标设备的配置信息,所述日志缓存区为所述内存存储区中的第二特定缓存区域;
当达到第二预设条件时,将所述目标设备的配置信息发送至所述目标设备。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911225044.3/2.html,转载请声明来源钻瓜专利网。