[发明专利]垃圾邮件过滤方法、装置、电子装置和存储介质在审
申请号: | 202110200482.5 | 申请日: | 2021-02-23 |
公开(公告)号: | CN112990852A | 公开(公告)日: | 2021-06-18 |
发明(设计)人: | 陈应婷;范渊;杨勃 | 申请(专利权)人: | 杭州安恒信息技术股份有限公司 |
主分类号: | G06Q10/10 | 分类号: | G06Q10/10;G06N3/00;G06N20/00 |
代理公司: | 杭州华进联浙知识产权代理有限公司 33250 | 代理人: | 韩潇 |
地址: | 310051 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 垃圾邮件 过滤 方法 装置 电子 存储 介质 | ||
1.一种垃圾邮件过滤方法,其特征在于,包括:
获取样本邮件,对所述样本邮件进行解析得到文本信息,对所述文本信息进行特征项提取得到由各特征项及其对应的权重组成的特征向量;
将所述特征向量分为特征项相互独立的两个以上特征子向量,基于人工蜂群算法训练每个所述特征子向量的逻辑回归子模型,得到训练后的逻辑回归子模型,其中,所述逻辑回归子模型为与每个所述特征子向量相对应的逻辑回归模型;
利用每个训练后的逻辑回归子模型对待过滤邮件进行分类,得到每个逻辑回归子模型预测的垃圾邮件概率值,基于贝叶斯公式组合每个逻辑回归子模型预测的垃圾邮件概率值,得到待过滤邮件中的垃圾邮件概率值。
2.根据权利要求1所述的垃圾邮件过滤方法,其特征在于,基于人工蜂群算法训练每个所述特征子向量的逻辑回归子模型,得到训练后的逻辑回归子模型包括:
基于人工蜂群算法更新每个所述特征子向量中的特征项的权重,得到所述特征项的最优权重,根据每个所述特征项的最优权重,得到训练后的逻辑回归子模型。
3.根据权利要求2所述的垃圾邮件过滤方法,其特征在于,基于人工蜂群算法更新每个所述特征子向量中的特征项的权重,得到所述特征项的最优权重,根据每个所述特征项的最优权重,得到训练后的逻辑回归子模型包括:
将每个所述特征子向量分为训练集和测试集,将训练集输入逻辑回归子模型,初始化人工蜂群算法中的相关参数,其中,人工蜂群算法中的相关参数包括食物源的最大循环次数N、终止迭代次数M、食物源的数量和初始解集,其中,食物源表示特征项的权重的可能解,初始解集为原始的食物源;
采蜜蜂根据初始解集生成新的食物源,采用评估函数计算食物源的适应值,若新的食物源的适应值大于原始的食物源的适应值,则用新的食物源代替原始的食物源,其中,适应值为食物源的花蜜量;
观察蜂重新计算初始解集的适应值,根据适应值计算可能为蜜源的概率,根据蜜源的概率选择食物源,并记录全局最优的食物源以及对应的适应值;
当判断采蜜蜂完成N次循环后,若食物源的适应值没有被提高,则丢弃该食物源,与该食物源对应的采蜜蜂变成侦查蜂,所述侦查蜂根据所述特征子向量的上限和下限,计算新的食物源;
判断算法迭代次数是否达到M,若是,则输出花蜜量最大的食物源,并作为所述特征项的最优权重,根据所述特征项的最优权重,得到训练后的逻辑回归子模型;
将测试集输入训练后的逻辑回归子模型,验证所述特征项最优权重的准确性。
4.根据权利要求3所述的垃圾邮件过滤方法,其特征在于,将测试集输入训练后的逻辑回归子模型,验证所述特征项最优权重的准确性包括:
将测试集输入训练后的逻辑回归子模型,得到每个训练后的逻辑回归子模型预测的垃圾邮件概率;
基于贝叶斯公式组合每个逻辑回归子模型预测的垃圾邮件概率值,得到待过滤邮件中的垃圾邮件概率值;
比较待过滤邮件中的垃圾邮件概率值与实际垃圾邮件的概率值,确定所述特征项最优权重的准确性,其中,所述实际垃圾邮件的概率通过所述样本邮件中的垃圾邮件和非垃圾邮件计算得出。
5.根据权利要求1所述的垃圾邮件过滤方法,其特征在于,基于贝叶斯公式组合每个逻辑回归子模型预测的垃圾邮件概率值,得到待过滤邮件中的垃圾邮件概率值包括:
基于贝叶斯公式计算所有逻辑回归子模型预测的垃圾邮件概率值和,得到待过滤邮件中的垃圾邮件概率值。
6.根据权利要求1所述的垃圾邮件过滤方法,其特征在于,获取样本邮件,对所述样本邮件进行解析得到文本信息包括:
基于RFC2822邮件标准、RFC2045邮件标准、RFC2046邮件标准和MIME格式标准,对所述样本邮件进行解码和解析,得到样本邮件的文本信息,其中,所述文本信息包括样本邮件标题、样本邮件文本和样本邮件附件标题。
7.根据权利要求1所述的垃圾邮件过滤方法,其特征在于,所述特征项包括以下至少之一:
字特征、词特征、短语特征、概念特征、字节级n-gram的特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州安恒信息技术股份有限公司,未经杭州安恒信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110200482.5/1.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理