[发明专利]一种IoT数据采集系统的工作方法及系统在审
申请号: | 201811090213.2 | 申请日: | 2018-09-18 |
公开(公告)号: | CN109246219A | 公开(公告)日: | 2019-01-18 |
发明(设计)人: | 陶光灿;夏虎;高杰;汪鹏 | 申请(专利权)人: | 食品安全与营养(贵州)信息科技有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京联创佳为专利事务所(普通合伙) 11362 | 代理人: | 韩炜 |
地址: | 550003 贵州*** | 国省代码: | 贵州;52 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式消息 服务模块 数据文件 数据信息 数据采集系统 消息服务 业务数据 业务组 设备输出数据 食品安全监测 接收设备 实时处理 输出数据 数据采集 数据上传 系统总线 高效率 按下 组装 存储 传输 外部 | ||
1.一种IoT数据采集系统的工作方法,其特征在于,按下述步骤进行:
a.HTTP服务群接收来自前置机的设备输出数据,并将设备输出数据组装成数据信息,将数据信息传给分布式消息服务模块,由分布式消息服务模块产生消息服务;
HTTP服务群将来自前置机的数据文件传给DFS系统和OSS系统,将数据信息传给分布式消息服务模块;
b.检测机构的mySQL服务器将仪器信息传至IoT数据采集系统的mySQL服务器;
c.DFS系统将数据文件传至Data Processor模块;同时,数据信息也经分布式消息服务模块传至Data Processor模块;
所述的消息服务作为系统总线,生成业务组定阅对应的消息;
Data Processor模块根据业务组定阅对应的消息,对数据文件实时处理,产生最终业务数据;
d.最终业务数据经分布式消息服务模块形成另一消息服务;
HTTP服务群分别形成数据结果和系统设置信息,经前置机推送给互联网上的应用,达到系统间互动;
e.将HTTP服务群中的数据文件、日志和前置机状态信息存储于IoT数据采集系统的mySQL服务器中;
将所述的数据、日志和前置机状态信息通过WEB API提供给运营人员、Data Processor模块及监控中心进行操作;
f.监控中心通过WEB API对平台各模块进行监控,提供前置机与HTTP服务群的状态、分布式消息服务模块性能进程以及DFS系统状态的监控信息;
g.将Data Processor模块中分析处理后的所有数据上传至外部LIMS系统。
2.根据权利要求1所述的IoT数据采集系统的工作方法,其特征在于,步骤c中,最终业务数据的产生如下:在Data Processor模块中,运营人员通过WEB API设置规则引擎进行和数据分析规则;线程池通过规则引擎调用数据分析规则,经由MessageListener进行分布式存储和分布式计算,实时地对数据进行分析,并产生最终业务数据。
3.根据权利要求1所述的IoT数据采集系统的工作方法,其特征在于,所述的HTTP服务群的工作方法如下:
a1.接收到前置机的状态汇报,查询前置机信息表,记录汇报次数与时间,前置机状态信息存入监控数据库influxDB,返回给前置机机构代码;
b1.接收来自前置机的正常任务和补采任务,接收文件或JSON数据,解压数据文件,上传到DFS系统和OSS中,并记录上传路径,存入文件表中;同时,把该文件的上传路径与记录ID存入JSON数据中构成IoT数据采集系统ID,成功后发送200状态码给前置机;
c1.创建IoT数据采集系统任务;
d1.把组装好的步骤b1中的JSON串即数据信息发送给分布式消息服务队列;
e1.记录日志和日志详情。
4.根据权利要求3所述的IoT数据采集系统的工作方法,其特征在于,步骤c1中,当IoT数据采集系统任务的状态需修改时,需记录日志并发送解析完成之后的JSON数据到前置机;修改流程如下:
a2.从分布式消息服务模块中获取消息接受者存入的JSON数据;
b2.根据JSON数据中的IoT数据采集系统ID获取任务表中的任务;
c2.从任务表中获取HTTP服务器创建任务时存入mysql的last_send2kafka_JSON字段;
d2.从last_send2kafka_JSON中获取前置机的IP;
e2.将从分布式消息服务模块中获取的JSON数据发送到前置机;
f2.前置机返回状态码和接收到数据的任务结束时间;
g2.根据状态码以及JSON数据中的任务状态判断任务成功和失败:若前置机返回200,且JSON数据中isSuccess=1,任务成功;若前置机返回200,且JSON数据中isSuccess=0,任务失败;若前置机返回400,任务失败;
h2.根据前置机返回的时间设置任务结束时间和任务结束状态isEnd=1;
i2.更新任务表;
j2.写入日志。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于食品安全与营养(贵州)信息科技有限公司,未经食品安全与营养(贵州)信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811090213.2/1.html,转载请声明来源钻瓜专利网。