[发明专利]一种数据的过滤方法、装置、电子设备及存储介质

权利要求书

1.一种数据的过滤方法，其特征在于，所述方法包括：

获取待过滤的数据；

利用预先训练好的过滤模型对所述数据进行过滤。

2.根据权利要求1所述的方法，其特征在于，利用预先训练好的过滤模型对所述数据进行过滤，包括：

利用预先训练好的过滤模型确定所述待过滤数据是无效信息或有效信息；

如果是无效信息，则利用预设过滤规则确定所述待过滤数据是无效信息或有效消息；

当利用预设过滤规则确定所述待过滤数据是无效信息时，将所述待过滤数据存入无效信息数据库。

3.根据权利要求1所述的方法，其特征在于，所述数据是HTTP协议数据，所述过滤模型训练的样本数据包括预设数量的URL数据，其中，属于同一URL数据的数量是均匀的。

4.根据权利要求3所述的方法，其特征在于，所述过滤模型的训练过程，包括：

基于所述样本数据训练过滤模型；

计算所述过滤模型的效果评价参数，其中，所述效果评价参数包括：准确率、错检率和/或召回率；

直至所述效果评价参数满足预设阈值，则所述过滤模型训练完成。

5.根据权利要求4所述的方法，其特征在于，计算所述过滤模型的效果评价参数，包括：对所述过滤模型采用交叉验证的方式计算效果评价参数。

6.根据权利要求1所述的方法，其特征在于，利用预先训练好的过滤模型对所述数据进行过滤之后，所述方法还包括：

根据对所述数据的过滤结果对所述过滤模型进行优化。

7.一种数据的过滤装置，其特征在于，包括：

数据获取模块，用于获取待过滤的数据；

数据过滤模块，用于利用预先训练好的过滤模型对所述数据进行过滤。

8.根据权利要求7所述的装置，其特征在于，所述数据过滤模块，具体用于：

信息初始确定模块，用于利用预先训练好的过滤模型确定所述待过滤数据是无效信息或有效信息；

无效信息确认模块，用于如果是无效信息，则利用预设过滤规则确定所述待过滤数据是无效信息或有效消息；

无效数据存储模块，用于当利用预设过滤规则确定所述待过滤数据是无效信息时，将所述待过滤数据存入无效信息数据库。

9.一种电子设备，其特征在于，所述电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-6中任一所述的一种数据的过滤方法。

10.一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-6中任一所述的一种数据的过滤方法。