[发明专利]基于大数据平台的SQL语句转换方法、装置和计算机设备在审
申请号: | 202011280867.9 | 申请日: | 2020-11-16 |
公开(公告)号: | CN112328260A | 公开(公告)日: | 2021-02-05 |
发明(设计)人: | 卢显锋 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
主分类号: | G06F8/51 | 分类号: | G06F8/51 |
代理公司: | 深圳市明日今典知识产权代理事务所(普通合伙) 44343 | 代理人: | 王杰辉;曹勇 |
地址: | 518000 广东省深圳市福田区益田路*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 数据 平台 sql 语句 转换 方法 装置 计算机 设备 | ||
本申请揭示了一种基于大数据平台的SQL语句转换方法、装置和计算机设备,其中方法包括:获取开发人员编写的第一数据处理语句SQL;判断所述第一数据处理语句SQL的数据源类型;根据数据源的类型将所述第一数据处理语句SQL转换成第二数据处理语句HQL;将所述第二数据处理语句HQL封装成可执行的linux程序的脚本。本申请通过预设的规则可以使不熟悉大数据开发语言和规则的开发人员通过开发SQ语句实现HQL的能力,自动地将开发人员开发的SQL语句转换成HQL语句,提高了不熟悉大数据开发语言和规则的开发人员的开发效率,同时也提高了大数据平台的使用率。本申请还涉及区块链技术,在区块链网络中实现一种基于大数据平台的SQL语句转换方法。
技术领域
本申请涉及到大数据领域,特别是涉及到一种基于大数据平台的SQL语句转换方法、装置和计算机设备。
背景技术
目前在IT行业领域,大数据非常流行,在处理批量数据方面,大数据平台拥有不可代替的时效和能力。但是针对传统的数据,要使用大数据的各种工具进行处理存在不少困难。首先就是在开发程序方面,大数据和传统的数据库程序开发语言、开发流程不经相同;其次对于开发者而言,传统的数据库工程师针对大数据的一些开发语言、开发程序都需要重新学习,这限制了一些传统数据库开发工程师在大数据平台上进行数据开发,同时针对一些历史的数据处理过程也难以使用大数据平台进行替代处理。
发明内容
本申请的主要目的为提供一种基于大数据平台的SQL语句转换方法、装置和计算机设备,旨在解决目前传统数据无法应用于大数据平台、传统数据库开发工程师无法快速开发大数据相关程序的技术问题。
为了实现上述发明目的,本申请提出一种基于大数据平台的SQL语句转换方法,包括:
获取开发人员编写的第一数据处理语句SQL;
判断所述第一数据处理语句SQL的数据源类型;
根据数据源的类型将所述第一数据处理语句SQL转换成第二数据处理语句HQL;
将所述第二数据处理语句HQL封装成可执行的linux程序的脚本。
进一步地,根据数据源的类型将所述第一数据处理语句SQL转换成第二数据处理语句HQL的步骤包括:
判断第一数据处理语句SQL中是否存在HQL不支持的操作命令;
若存在所述不支持的操作指令,则按照预设的处理方法对所述不支持操作指令进行转换;以及,
判断第一数据处理语句SQL中是否存在数据仓库工具hive不支持的函数;
若存在所述不支持的函数,则按照预设的处理方法对所述不支持的函数进行转换。
进一步地,所述按照预设的处理方法对所述不支持操作指令进行转换的步骤包括:
判断所述不支持的操作指令的类型,所述不支持的操作指令类型包括更新操作、删除操作和提交操作;
若所述不支持的操作指令为更新操作,则将所述第一数据处理语句SQL中需要更新的数据导入第一中间表,将原表进行备份,将所述第一中间表的数据更新到所述原表中,完成更新操作;
若所述不支持的操作指令为删除操作,则将所述第一数据处理语句SQL中需要保留的数据导入第二中间表,将原表进行备份,将所述第二中间表覆盖到所述原表中,完成更新操作;
若所述不支持的操作指令为提交操作,则将需要的数据导入第三中间表,将原表进行备份,将所述第三中间表覆盖到所述原表中,完成提交操作。
进一步地,所述按照预设的处理方法对所述不支持的函数进行转换的步骤包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011280867.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种水陆两栖仿生机器人自适应运动控制系统
- 下一篇:陈桔及其制作方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置