[发明专利]一种基于Flink分析时时大屏展示方法、装置、存储介质在审
申请号: | 202210666864.1 | 申请日: | 2022-06-13 |
公开(公告)号: | CN114896123A | 公开(公告)日: | 2022-08-12 |
发明(设计)人: | 张潞璐;朱明;陈旭文;徐珺;黄健民;卢强;汪佳磊;关玉婷;王国森 | 申请(专利权)人: | 浙江省标准化研究院(金砖国家标准化(浙江)研究中心;浙江省物品编码中心) |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F11/32;G06F9/50 |
代理公司: | 杭州运酬专利代理事务所(特殊普通合伙) 33429 | 代理人: | 王叶娟 |
地址: | 310005 浙江省杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 flink 分析 时时 展示 方法 装置 存储 介质 | ||
1.一种基于Flink分析时时大屏展示方法,其特征在于,包括以下步骤:
步骤S1:通过代码埋点获得数据;
步骤S2:将数据传入分布式埋点日志收集程序;
步骤S3:日志收集程序写入kafka消息队列;
步骤S4:Flink集群任务处理kafka消息,并将计算结果输出到kafka;
步骤S5:程序监听kafka计算结果,并使用websocket时时推送到大屏展示。
2.根据权利要求1所述的一种基于Flink分析时时大屏展示方法,其特征在于,所述的步骤S4还包括以下步骤:
步骤S4.1:Flink程序提交信息至工作客户端;
步骤S4.2:工作客户端提交消息至工作管理器;
步骤S4.3:工作管理器反馈消息已接收信号至工作客户端;
步骤S4.4:工作管理器提交任务至任务管理器;
步骤S4.5:任务管理器通过任务跟踪器对执行任务进行任务跟踪;
步骤S4.6:任务管理器更新执行任务至工作管理器;
步骤S4.7:工作管理器提交工作反馈至Flink程序。
3.根据权利要求1所述的一种基于Flink分析时时大屏展示方法,其特征在于,所述的工作客户端接收程序,解析和优化程序的执行计划,然后提交执行计划到工作管理器。
4.根据权利要求1所述的一种基于Flink分析时时大屏展示方法,其特征在于,所述的工作管理器负责申请资源,协调以及控制整个工作的执行过程,包括:调度任务、处理检查点、容错。
5.根据权利要求1所述的一种基于Flink分析时时大屏展示方法,其特征在于,所述的任务管理器运行在不同节点上的JVM进程,负责接收并执行工作管理器发送的运算符任务,并且与工作管理器通信,用于反馈任务状态信息,在上述的基于Flink分析时时大屏展示方法中,所述的跟踪器是任务管理器资源粒度的划分,每个跟踪器都有自己独立的内存。所有跟踪器平均分配任务管理器的内存。
6.根据权利要求1所述的一种基于Flink分析时时大屏展示方法,其特征在于,所述的运算符任务是在运营商的运算符子任务进行链化之后形成的,具体Flink工作中有多少任务管理器和运营商的并行度和链化的策略有关。
7.根据权利要求1所述的一种基于Flink分析时时大屏展示方法,其特征在于,所述的运算符子任务:因为Flink是分布式部署的,程序中的每个算子,在实际执行中被分隔为一个或者多个运算符子任务,运算符子任务的数量是该特定运算符的并行度。数据流在算子之间流动,就对应到运算符子任务之间的数据传输。Flink允许同一个工作中来自不同任务管理器的运算符子任务可以共享同一个跟踪器。每个跟踪器可以执行一个并行的管路。可以将管路看作是多个运算符子任务的组成的。
8.一种基于Flink分析时时大屏展示装置,包括输入端、输出端、一个或多个处理器、存储器以及一个或多个程序,其中所述一个或多个程序被存储在所述存储器中,并且被配置成由所述一个或多个处理器执行,所述程序包括用于执行上述的基于Flink分析时时大屏展示方法。
9.一种计算机可读存储介质,存储有计算机程序,所述计算机程序可被处理器执行以完成上述的基于Flink分析时时大屏展示方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江省标准化研究院(金砖国家标准化(浙江)研究中心、浙江省物品编码中心),未经浙江省标准化研究院(金砖国家标准化(浙江)研究中心、浙江省物品编码中心)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210666864.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种独立包装干热消毒玻璃管的制备工艺
- 下一篇:钢护筒组合结构件及其施工方法