[发明专利]用于数据格式化导出的数据处理方法及装置在审
申请号: | 201910453678.8 | 申请日: | 2019-05-28 |
公开(公告)号: | CN110222108A | 公开(公告)日: | 2019-09-10 |
发明(设计)人: | 陈安阳;吴峰;郭伟 | 申请(专利权)人: | 上海易点时空网络有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F17/22 |
代理公司: | 北京卓唐知识产权代理有限公司 11541 | 代理人: | 唐海力 |
地址: | 200125 上海市浦东*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据组 数据格式化 数据整合 数据处理 导出 数据处理效率 处理数据 错误数据 导出数据 技术效果 来源数据 时间成本 数据对应 数据格式 业务数据 重复数据 自动实现 脚本 整合 费力 开发 申请 | ||
本申请公开了一种用于数据格式化导出的数据处理方法及装置,通过包括:获取多个数据组;确定每个数据组中各个数据对应的类型名称;其中,每个所述数据组中包括一个或多个数据;根据所述类型名称,对所述多个数据组中的数据进行处理,得到整合后数据。达到了能够自动实现数据整合,无需每次数据整合都要开发者手动编写脚本导出数据而造成费时费力的目的,从而实现了数据处理效率和业务数据的准确性高的技术效果,并能够解决不同来源数据的数据格式不规范、重复数据、错误数据、开发者处理数据时间成本高等问题。
技术领域
本申请涉及数据处理技术领域,具体而言,涉及一种用于数据格式化导出的数据处理方法及装置。
背景技术
随着一些公司业务的拓展或增长,在不同区域也会设立各种机构,随之而来的是:在进行多方数据整合时,往往由于各方数据是按照各自习惯进行处理的,因此使得导出的数据格式不一,无法快速整合到一起。
举例的:在驾校通业务对接中,落地页中需展示城市经销商数据,车企厂商提供的Excel数据无法直接使用,并且存在经销商数据格式不规范、重复数据、错误数据、开发者处理数据时间成本等问题,而开发者需要经过格式化的城市经销商数据,难免需要开发者手动编写脚本导出数据,费时费力。
针对相关技术中存在的诸多技术问题,目前尚未提出有效的解决方案。
发明内容
本申请的主要目的在于提供一种用于数据格式化导出的数据处理方法及装置,以解决相关技术中存在的至少一个技术问题。
为了实现上述目的,根据本申请的第一方面,提供了一种用于数据格式化导出的数据处理方法。
根据本申请的用于数据格式化导出的数据处理方法包括:
一种用于数据格式化导出的数据处理方法,包括:
获取多个数据组;
确定每个数据组中各个数据对应的类型名称;其中,每个所述数据组中包括一个或多个数据;
根据所述类型名称,对所述多个数据组中的数据进行处理,得到整合后数据。
进一步的,如前述的用于数据格式化导出的数据处理方法,在确定每个数据组中各个数据对应的类型名称之前,还包括:
预设与各个类型的数据所对应的特征字段;
根据所述特征字段得到与各个类型的数据对应的所述类型名称;其中,所述类型名称中包含所述特征字段。
进一步的,如前述的用于数据格式化导出的数据处理方法,在得到整合后数据之前,还包括:
对所述多个数据组中的数据逐一进行比对;
当存在数据重复的时候,对所述多个数据组中的数据进行去重。
进一步的,如前述的用于数据格式化导出的数据处理方法,在得到整合后数据之前,还包括:
获取所述多个数据组中的数据;
判断所述多个数据组中的数据是否存在空值;以及
判断所述数据的数据格式是否正确;
在所述数据为空值或者数据格式不正确时,获取所述数据所在的位置,并进行警报。
为了实现上述目的,根据本申请的第二方面,提供了一种用于数据格式化导出的数据处理装置。
根据本申请的用于数据格式化导出的数据处理装置包括:一种用于数据格式化导出的数据处理装置,其特征在于,包括:
数据组获取单元,用于获取多个数据组;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海易点时空网络有限公司,未经上海易点时空网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910453678.8/2.html,转载请声明来源钻瓜专利网。