[发明专利]数据处理方法、装置、电子设备及可读存储介质

说明书

本公开公开了一种数据处理方法、装置、电子设备及可读存储介质，涉及数据处理技术领域，尤其涉及大数据技术领域。本公开通过根据所获取的用户所提供的原始数据中的至少两个对象的地址信息中各对象的地址信息，对该原始数据进行数据判重处理，进而，根据所述数据判重处理的判重处理结果，获得电子地图的POI信息，使得能够根据所述电子地图的POI信息和所述判重处理结果，输出所述原始数据中重复的数据，由于采用电子地图的POI信息对基于原始数据的数据判重处理进行辅助判重处理，能够有效地筛选出原始数据中重复的数据，从而提高了数据的可靠性和有效性。

技术领域

本公开涉及数据处理技术领域，具体涉及大数据技术领域，尤其涉及一种数据处理方法、装置、电子设备及可读存储介质。

背景技术

在进行数据输入时，由于各种因素，难免会发生重复输入的情况，这会给后续的数据处理带来较大麻烦，例如，数据库的数据杂乱、数据无效等问题，从而导致了数据的可靠性和有效性的降低。

因此，亟需提供一种数据处理方法，能够有效识别重复的数据，以提高数据的可靠性和有效性。

发明内容

本公开提供了一种数据处理方法、装置、电子设备及可读存储介质。

根据本公开的一方面，提供了一种数据处理方法，包括：

获取用户所提供的原始数据，所述原始数据中包括至少两个对象的地址信息；

根据所述至少两个对象的地址信息中各对象的地址信息，对所述原始数据进行数据判重处理；

根据所述数据判重处理的判重处理结果，获得电子地图的POI信息；

根据所述电子地图的POI信息和所述判重处理结果，输出所述原始数据中重复的数据。

根据本公开的另一方面，提供了一种数据处理装置，包括：

数据获取单元，用于获取用户所提供的原始数据，所述原始数据中包括至少两个对象的地址信息；

初始判重单元，用于根据所述至少两个对象的地址信息中各对象的地址信息，对所述原始数据进行数据判重处理；

辅助判重单元，用于根据所述数据判重处理的判重处理结果，获得电子地图的POI信息；

结果输出单元，用于根据所述电子地图的POI信息和所述判重处理结果，输出所述原始数据中重复的数据。

根据本公开的再一方面，提供了一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如上所述的方面和任一可能的实现方式的方法。

根据本公开的又一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行如上所述的方面和任一可能的实现方式的方法。

根据本公开的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现如上所述的方面和任一可能的实现方式的方法。

由上述技术方案可知，本公开实施例通过根据所获取的用户所提供的原始数据中的至少两个对象的地址信息中各对象的地址信息，对该原始数据进行数据判重处理，进而，根据所述数据判重处理的判重处理结果，获得电子地图的POI信息，使得能够根据所述电子地图的POI信息和所述判重处理结果，输出所述原始数据中重复的数据，由于采用电子地图的POI信息对基于原始数据的数据判重处理进行辅助判重处理，能够有效地筛选出原始数据中重复的数据，从而提高了数据的可靠性和有效性。