[发明专利]基于半监督学习的模型训练方法、系统、终端及存储介质有效

专利信息
申请号: 202111276553.6 申请日: 2021-10-29
公开(公告)号: CN113822374B 公开(公告)日: 2023-07-18
发明(设计)人: 徐啸;李晓宇;孙瑜尧 申请(专利权)人: 平安科技(深圳)有限公司
主分类号: G06F18/2415 分类号: G06F18/2415;G06F18/214;G06F18/25;G06N3/0464;G06N3/0895
代理公司: 北京中强智尚知识产权代理有限公司 11448 代理人: 贾依娇
地址: 518000 广东省深圳市福田街*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 监督 学习 模型 训练 方法 系统 终端 存储 介质
【说明书】:

发明涉及一种基于半监督学习的模型训练方法、系统、终端及存储介质。方法包括获取带有潜在噪音标签的样本数据集;根据第一分类模型对样本数据集进行认知判断,以得到样本数据集的第一伪标签信息;根据第二分类模型对样本数据集进行认知判断,以得到样本数据集第二伪标签信息;将具有第一伪标签信息的样本数据集和具有第二伪标签信息样本数据集进行融合,以得加权样本数据集;通过加权样本数据集对第一分类模型的模型参数进行调整,得到调整后的第一分类模型;通过加权样本数据集对第二分类模型的模型参数进行调整,得到调整后的第二分类模型。该方法在带有噪声标签的数据上的总体性能优于其它单个噪音标签学习方法,具有更好的稳定性和鲁棒性。

技术领域

本发明涉及机器学习技术领域,特别是涉及一种基于半监督学习的模型训练方法、系统、终端及存储介质。

背景技术

随着海量数据的出现,人工智能技术迅速发展,而机器学习是人工智能发展到一定阶段的必然产物,其致力于通过计算的手段,从大量数据中挖掘有价值的潜在信息。

在机器学习领域,往往通过将经验数据提供给机器学习算法来训练机器学习模型以确定构成机器学习模型的理想参数,而训练好的机器学习模型可被应用于在面对新的预测数据时提供相应的预测结果。而这些海量数据如果透过人工标注的话,将会耗费较多的人力物力和财力。因此,如何有效利用未标注数据来解决标注量少的问题时研究的重点,为了解决这一问题,半监督学习近年来被广泛研究。

对于半监督学习技术而言,数据集中只有少量数据是有标签的,其主要目标是利用隐藏在大量无标签样本中的数据分布信息来提升仅使用少量有标签样本时的学习性能。现有噪声标签学习方法中,利用元数据的方法表现最好,这里的元数据指一个小型的标注保证正确的样本子集,该场景与半监督学习类似。而在标签噪声比例较大时,半监督学习的方法会优于噪声标签学习;标签噪声比例较小时,过去认为半监督学习方法往往不及标签噪声学习方法,在标签噪声未知时,如何选择这些方法是一个两难的问题。

因此,如何提供一种合适的噪音标签学习方法来解决噪音标签未知情况下的学习处理是亟需解决的问题。

发明内容

基于此,有必要针对上述问题,提供一种基于半监督学习的模型训练方法、系统、终端及存储介质。

一种基于半监督学习的模型训练方法,包括:

获取带有潜在噪音标签的样本数据集;

根据第一分类模型对所述样本数据集进行认知判断,以得到所述样本数据集的第一伪标签信息;

根据第二分类模型对所述样本数据集进行认知判断,以得到所述样本数据集第二伪标签信息;

将具有所述第一伪标签信息的样本数据集和具有所述第二伪标签信息样本数据集进行融合,以得加权样本数据集;

通过所述加权样本数据集对所述第一分类模型的模型参数进行调整,得到调整后的第一分类模型;

通过所述加权样本数据集对所述第二分类模型的模型参数进行调整,得到调整后的第二分类模型。

在一个可能的实施例中,所述将具有所述第一伪标签信息的样本数据集和具有所述第二伪标签信息样本数据集进行融合,以得加权样本数据集,包括:

根据所述第一伪标签信息和所述第二伪标签信息,确定具有所述第一伪标签信息的样本数据集中的样本数据的权值;

根据具有所述第一伪标签信息的样本数据集和具有所述第一伪标签信息的样本数据集中的样本数据的权值,确定所述加权样本数据集。

在一个可能的实施例中,所述根据所述第一伪标签信息和所述第二伪标签信息,确定具有所述第一伪标签信息的样本数据集中的样本数据的权值,包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111276553.6/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top