[发明专利]逻辑脚本的处理方法、装置、电子设备及存储介质在审
申请号: | 202011566603.X | 申请日: | 2020-12-25 |
公开(公告)号: | CN112597121A | 公开(公告)日: | 2021-04-02 |
发明(设计)人: | 任亮;傅雨梅;王行行;文齐辉 | 申请(专利权)人: | 北京知因智慧科技有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/2458;G06F16/25;G06F16/28 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 刘凤 |
地址: | 100000 北京市西城区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 逻辑 脚本 处理 方法 装置 电子设备 存储 介质 | ||
1.一种逻辑脚本的处理方法,其特征在于,包括以下步骤:
获取HQL控件中的逻辑脚本;
创建本地的参数文件,并将所述参数文件传入到HDFS的文件系统中,得到所述参数文件的存储路径;其中,所述参数文件中包括控制变量名称及控制变量值;
基于所述参数文件的存储路径和所述控制变量名称,读取所述控制变量名称对应的控制变量值,并将所述控制变量值返回给HIVE;
修改所述HQL控件中的逻辑脚本。
2.根据权利要求1所述的处理方法,其特征在于,所述HQL控件对应于DSS平台的至少一个工作流。
3.根据权利要求2所述的处理方法,其特征在于,在所述创建本地的参数文件,并将所述参数文件传入到HDFS的文件系统中,得到所述参数文件的存储路径的步骤之后,还包括步骤:
在所述DSS平台的至少一个工作流上设置路径参数,使每个工作流分别对应一个所述参数文件。
4.根据权利要求1所述的处理方法,其特征在于,在所述修改所述HQL控件中的逻辑脚本的步骤之后,还包括步骤:
将修改后的逻辑脚本发布到定时调度程序中,按照预设的时间参数运行。
5.根据权利要求1所述的处理方法,其特征在于,在所述基于所述参数文件的存储路径和所述控制变量名称,读取所述控制变量名称对应的控制变量值,并将所述控制变量值返回给HIVE的步骤中,还包括:
自定义并运行UDF函数,并通过所述UDF函数调用所述HDFS的文件系统中的相关API接口,从而读取所述HDFS的文件系统中的参数文件。
6.一种逻辑脚本的处理装置,其特征在于,包括:
获取模块,用于获取HQL控件中的逻辑脚本;
编辑模块,用于创建本地的参数文件,并将所述参数文件传入到HDFS的文件系统中,得到所述参数文件的存储路径;其中,所述参数文件中包括控制变量名称及控制变量值;
读取模块,用于基于所述参数文件的存储路径和所述控制变量名称,读取所述控制变量名称对应的控制变量值,并将所述控制变量值返回给HIVE;
处理模块,用于修改所述HQL控件中的逻辑脚本。
7.根据权利要求6所述的处理装置,其特征在于,还包括设置模块,用于在DSS平台的至少一个工作流上设置路径参数,使每个工作流分别对应一个所述参数文件。
8.根据权利要求6所述的处理装置,其特征在于,还包括定时调度模块,用于将修改后的逻辑脚本发布到定时调度程序中,按照预设的时间参数运行。
9.一种电子设备,其特征在于,包括:处理器、存储介质和总线,
所述存储介质存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储介质之间通过总线通信,所述处理器执行所述机器可读指令,以执行如权利要求1至5任一所述逻辑脚本的处理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如权利要求1至5任一所述逻辑脚本的处理方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京知因智慧科技有限公司,未经北京知因智慧科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011566603.X/1.html,转载请声明来源钻瓜专利网。