[发明专利]一种面向物联网传统SQL开发人员的流式计算方法在审
申请号: | 201810708982.8 | 申请日: | 2018-07-02 |
公开(公告)号: | CN108984279A | 公开(公告)日: | 2018-12-11 |
发明(设计)人: | 管新;尚平平 | 申请(专利权)人: | 山东汇贸电子口岸有限公司 |
主分类号: | G06F9/46 | 分类号: | G06F9/46;G06F9/54;G06F17/30 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 韩月娥 |
地址: | 250100 山东省济南市*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种面向物联网传统SQL开发人员的流式计算方法,涉及大数据与物联网技术领域,通过类SQL的形式表述流式计算需求,通过SQL的形式设定规则,对消息数据筛选、变型、转发;用大数据相关技术具象化该需求,使用的大数据技术为Spark Structured Streaming;并启动任务对相应需求进行实现,通过读取MQTT协议消息,使用组件自带SQL解析引擎启动流式任务。本发明面向传统SQL开发人员简化了流式计算,提供一个符合SparkSQL标准的SQL命令,即可提交流式分析任务,步骤尤为简单,实用性很强,应用场景很广泛,满足物联网环境下大部分的需求。 | ||
搜索关键词: | 流式 大数据 物联网 读取 物联网环境 物联网技术 使用组件 消息数据 协议消息 引擎启动 应用场景 变型 交流式 具象化 开发 自带 转发 筛选 分析 | ||
【主权项】:
1.一种面向物联网传统SQL开发人员的流式计算方法,其特征在于,通过类SQL的形式表述流式计算需求,用户通过SQL的形式设定规则,对消息数据筛选、变型、转发;同时用大数据相关技术具象化该需求,使用的大数据技术为Spark Structured Streaming;并启动任务对相应需求进行实现,通过读取MQTT协议消息,使用组件自带SQL解析引擎启动流式任务;实现流程包括:从source端接收消息,在Spark流引擎中处理逻辑,结果输出到sink端。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东汇贸电子口岸有限公司,未经山东汇贸电子口岸有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810708982.8/,转载请声明来源钻瓜专利网。