[发明专利]数据处理方法和数据处理系统在审
申请号: | 202210158369.X | 申请日: | 2022-02-21 |
公开(公告)号: | CN114547076A | 公开(公告)日: | 2022-05-27 |
发明(设计)人: | 余婷婷 | 申请(专利权)人: | 京东方科技集团股份有限公司;重庆京东方智慧科技有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/2455 |
代理公司: | 北京天昊联合知识产权代理有限公司 11112 | 代理人: | 冯建基;姜春咸 |
地址: | 100015 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 数据处理系统 | ||
1.一种数据处理方法,其特征在于,所述数据处理方法包括:
接收第一数据源标识和结构化查询语句,所述结构化查询语句包括至少一个查询字段、数据筛选条件和至少一个表间关联关系,所述表间关联关系用于指示源端数据源的数据表之间的关联;
对所述结构化查询语句执行预定解析操作,获得解析结果;所述解析结果包括每个所述查询字段对应的目标数据所在数据表的表名,以及每个所述查询字段对应的目标数据的数据类型;
基于所述解析结果、所述数据筛选条件及所述表间关联关系,从源端数据源的至少一个数据表中采集所述目标数据,并将所述目标数据写入目的数据源;所述源端数据源为与所述第一数据源标识对应的数据源。
2.根据权利要求1所述的方法,其特征在于,所述预定解析操作包括第一解析操作和第二解析操作;所述第一解析操作用于获取所述结构化查询语句中每个查询字段的字段名称;所述第二解析操作用于获取所述结构化查询语句中每个查询字段对应的目标数据所在数据表的表名,以及每个所述查询字段对应的目标数据的数据类型,其中,所述表名包括数据表的别名。
3.根据权利要求1所述的方法,其特征在于,所述接收用户输入的第一数据源标识和结构化查询语句之前,还包括:
与多个数据源建立通信连接,其中,多个数据源至少包括所述源端数据源和所述目的数据源;
获取所述查询字段与目的字段的映射关系,所述目的字段为归属于所述目的数据源的数据表所包含的字段;
其中,所述将所述目标数据写入目的数据源,包括:
基于所述查询字段与目的字段的映射关系,将所述查询字段对应的目标数据写入所述目的字段在所述目的数据源对应的数据表中。
4.根据权利要求3所述的方法,其特征在于,所述对所述结构化查询语句执行预定解析操作,获得解析结果之后,还包括:
将所述结构化查询语句、所述解析结果和所述查询字段与目的字段的映射关系转换为目标任务的任务配置数据,并将所述任务配置数据存储在本地数据库中;
其中,所述基于所述解析结果、所述数据筛选条件及所述表间关联关系,从源端数据源的至少一个数据表中采集所述目标数据,并将所述目标数据写入目的数据源的步骤,包括:
响应于任务执行指令,执行所述目标任务,以基于所述解析结果、所述数据筛选条件及所述表间关联关系,从源端数据源的至少一个数据表中采集所述目标数据,并基于所述查询字段与目的字段的映射关系,将所述查询字段对应的目标数据写入所述目的字段在所述目的数据源对应的数据表中。
5.根据权利要求3或4所述的方法,其特征在于,所述基于所述解析结果、所述数据筛选条件及所述表间关联关系,从源端数据源的至少一个数据表中采集所述目标数据之前,还包括:
响应于映射修改指令,将目标查询字段映射的目的字段修改为新的目的字段,所述目标查询字段是所述修改指令指向的查询字段。
6.根据权利要求1所述的方法,其特征在于,所述对所述结构化查询语句执行预定解析操作,获得解析结果的步骤,包括:
对所述结构化查询语句执行校验操作,以确定所述结构化查询语句是否符合预设要求;
在所述结构化查询语句符合预设要求的情况下,对所述结构化查询语句执行预定解析操作,获得解析结果。
7.根据权利要求6所述的方法,其特征在于,所述对所述结构化查询语句执行校验操作,以确定所述结构化查询语句是否符合预设要求步骤,包括:
校验所述结构化查询语句是否为预设语句,以及校验所述结构化查询语句是否符合预设语法规则;
在所述结构化查询语句为预设语句、且所述结构化查询语句符合预设语法规则的情况下,所述结构化查询语句符合预设要求。
8.根据权利要求1所述的方法,其特征在于,所述目标数据包括行政区域的政务数据、场所的管理数据、道路的交通数据、气象管理数据、医疗服务数据中的至少一种。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司;重庆京东方智慧科技有限公司,未经京东方科技集团股份有限公司;重庆京东方智慧科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210158369.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:套刻误差的补偿方法
- 下一篇:半导体工艺设备、其升降机构及其控制方法