[发明专利]数据的处理方法、模型的训练方法、装置和设备

说明书

本发明实施例提供了一种数据的处理方法、模型的训练方法、装置和设备。方法包括：获取待处理数据；确定与待处理数据相对应的至少一个第一参考数据和至少一个第二参考数据，至少一个第一参考数据与待处理数据的相似度大于或等于预设阈值，至少一个第二参考数据与待处理数据的相似度小于预设阈值；根据至少一个第一参考数据和至少一个第二参考数据，确定与待处理数据相对应的目标数据对象。本实施例提供的技术方案，有效地实现了无需对数据对象进行预先召回，可直接避免数据对象的误召回、过召回或者无召回等现象；基于第一参考数据和第二参考数据来确定目标数据对象，不仅拉远了正负例数据对象之间的距离，并且也提高了数据处理的精度和可靠性。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据的处理方法、模型的训练方法、装置和设备。

背景技术

随着科学技术的飞速发展，数据平台的应用越来越广泛。以电商平台为例，在电商的应用场景中，某些商家会基于利益关系发布一些违禁商品/服务或者无资质商品/服务，并且，为了防止被处罚，会采用各种手段去规避处罚和下架，但同时希望商品/服务能够被曝光。例如：商家所发布的信息内容中可能存在一些隐含内容，即从直观上来看，发布信息内容并没有任何违规或者违法，而实际中，上述信息可以指向一些违禁商品/服务或者无资质商品/服务。

对于包括一些隐含内容的待发布信息而言，在对待发布信息进行审查时，由于内容直观上符合要求。因此，容易对违禁商品/服务或者无资质商品/服务所对应的信息通过审核并进行发布，进而影响了市场经济的正当性和公正良俗的原则。

发明内容

本发明实施例提供了一种数据的处理方法、模型的训练方法、装置和设备，用于解决现有技术中存在的无法对包含一些隐含内容的待发布信息进行审核，导致一些违禁商品/服务或者无资质商品/服务进行发布的问题。

第一方面，本发明实施例提供了一种数据的处理方法，包括：

获取待处理数据；

确定与所述待处理数据相对应的至少一个第一参考数据和至少一个第二参考数据，所述至少一个第一参考数据与所述待处理数据的相似度大于或等于预设阈值，所述至少一个第二参考数据与所述待处理数据的相似度小于预设阈值；

根据所述至少一个第一参考数据和所述至少一个第二参考数据，确定与所述待处理数据相对应的目标数据对象。

第二方面，本发明实施例提供了一种数据的处理装置，包括：

第一获取模块，用于获取待处理数据；

第一确定模块，用于确定与所述待处理数据相对应的至少一个第一参考数据和至少一个第二参考数据，所述至少一个第一参考数据与所述待处理数据的相似度大于或等于预设阈值，所述至少一个第二参考数据与所述待处理数据的相似度小于预设阈值；

第一处理模块，用于根据所述至少一个第一参考数据和所述至少一个第二参考数据，确定与所述待处理数据相对应的目标数据对象。

第三方面，本发明实施例提供了一种电子设备，包括：存储器、处理器；其中，所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器至少可以实现如第一方面所述的数据的处理方法。

本发明实施例提供了一种非暂时性机器可读存储介质，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器至少可以实现如第一方面所述的数据的处理方法。

第四方面，本发明实施例提供了一种模型的训练方法，包括：

获取第一数据；

确定与所述第一数据相对应的正样本数据、负样本数据和无关样本数据，其中，所述正样本数据与所述第一数据的相似度大于或等于预设阈值，所述负样本数据和无关样本数据与所述第一数据的相似度小于预设阈值；