[发明专利]数据分类模型的训练方法、数据分类方法和装置有效
申请号: | 202210208136.6 | 申请日: | 2022-03-03 |
公开(公告)号: | CN114692724B | 公开(公告)日: | 2023-03-28 |
发明(设计)人: | 刘芳卿;傅幸;吕乐;王宁涛;周璟;杨阳;蒋晨之;王维强 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06F18/2415 | 分类号: | G06F18/2415;G06F18/214;G06N3/047;G06N3/08 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 李世喆 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 分类 模型 训练 方法 装置 | ||
本说明书实施例描述了数据分类模型的训练方法、数据分类方法和装置。根据实施例的方法,首先获取标签已知的正数据样本和标签未知的灰度数据样本,然后分别确定基于该正数据样本的标准正数据概率分布和基于该灰度数据样本的拟合正数据概率分布。进一步即可根据该标准正数据概率分布和拟合正数据概率分布实现对数据分类模型的训练。如此基于灰度数据中的正数据也应服从标准正数据概率分布的原则,构建适用于对所有数据进行标签分类的数据分类模型,从而能够提高利用该数据分类模型对数据进行分类的准确性。
技术领域
本说明书一个或多个实施例涉及计算机技术领域,尤其涉及数据分类模型的训练方法、数据分类方法和装置。
背景技术
在机器学习中,需要对原始数据进行标签定义,如此才能利用该定义过标签的数据进行学习训练。
然而,在机器学习的实际应用场景中,用于进行机器学习的原始数据中经常会出现“灰标”的情形,即有些数据无法对其进行准确的分类,从而导致无法对该数据进行准确的标签定义,进一步也就导致了训练得到的模型可用性较低。
发明内容
本说明书一个或多个实施例描述了数据分类模型的训练方法、数据分类方法和装置,能够提高数据分类的准确性。
根据第一方面,提供了数据分类模型的训练方法,包括:
获取分类标签已知的正数据样本和分类标签未知的灰度数据样本;
确定基于所述正数据样本的标准正数据概率分布;以及,
确定基于所述灰度数据样本的拟合正数据概率分布;其中,所述拟合正数据概率分布表征所述灰度数据样本中实际分类标签为正数据的概率分布;
根据所述标准正数据概率分布和所述拟合正数据概率分布,对数据分类模型进行训练。
在一种可能的实现方式中,所述确定基于所述正数据样本的标准正数据概率分布,包括:
将所述正数据样本的极大似然估计,确定为该正数据样本的标准正数据概率分布。
在一种可能的实现方式中,所述确定基于所述灰度数据样本的拟合正数据概率分布,包括:
利用神经网络表征出样本历史数据中任意一个数据为正数据的条件概率分布;其中,所述正数据样本和所述灰度数据样本均从所述样本历史数据中获取得到;
根据所述条件概率分布,利用贝叶斯表征出灰度数据样本中实际分类标签为正数据的概率分布;
将表征出的所述正数据的概率分布定义为拟合正数据概率分布。
在一种可能的实现方式中,所述根据所述标准正数据概率分布和所述拟合正数据概率分布对数据分类模型进行训练,包括:
根据所述标准正数据概率分布和所述拟合正数据概率分布,确定损失函数;
计算所述损失函数中权重参数的更新量。
在一种可能的实现方式中,所述根据所述标准正数据概率分布和所述拟合正数据概率分布确定损失函数,包括:
计算所述标准正数据概率分布和所述拟合正数据概率分布之间的KL(Kullback-Leibler)散度损失;
确定对所述损失函数进行过拟合修正的正则化损失;
根据所述KL散度损失和所述正则化损失,确定所述标准正数据概率分布和所述拟合正数据概率分布的损失函数。
在一种可能的实现方式中,所述计算所述标准正数据概率分布和所述拟合正数据概率分布之间的KL散度损失,包括:
根据如下计算式计算所述KL散度损失:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210208136.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:阵列基板、显示面板及显示装置
- 下一篇:车载多液氢瓶并联输出供应系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置