[发明专利]预测模型训练方法、装置、存储介质及计算机设备在审
申请号: | 201910559074.1 | 申请日: | 2019-06-26 |
公开(公告)号: | CN110457675A | 公开(公告)日: | 2019-11-15 |
发明(设计)人: | 毕野;黄博;吴振宇;王建明 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06K9/62;G06F16/33;G06N3/08 |
代理公司: | 11448 北京中强智尚知识产权代理有限公司 | 代理人: | 黄耀威;贾依娇<国际申请>=<国际公布> |
地址: | 518000广东省深圳市福田街*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 样本数据 标注 预测模型 预测 置信度 神经网络模型 预测模型训练 计算机设备 存储介质 迭代训练 人工标注 神经网络 训练效率 预设条件 更新 预设 样本 重复 劳动 | ||
1.一种预测模型训练方法,其特征在于,包括:
获取待训练的预测模型所需要的标注样本数据量、以及数据量之和等于所述标注样本数据量的标注样本数据和未标注样本数据;
将所述标注样本数据输入至预设神经网络模型进行训练,得到所述预测模型对应的初步模型;
将所述未标注样本数据输入至所述初步模型进行预测,得到所述未标注样本数据对应各个预测类别的置信度;
确定置信度不符合预设条件的预测类别,选取确定的预测类别下的未标注样本数据供标注,利用新标注的样本数据,更新所述标注样本数据;
将更新后的标注样本数据输入至所述初步模型进行迭代训练,得到所述预测模型。
2.根据权利要求1所述的方法,其特征在于,所述确定置信度不符合预设条件的预测类别,选取确定的预测类别下的未标注样本数据供标注,利用新标注的样本数据,更新所述标注样本数据,包括:
确定置信度小于预设阈值的预测类别,选取确定的预测类别下的未标注样本数据供标注,利用新标注的样本数据,更新所述标注样本数据。
3.根据权利要求1所述的方法,其特征在于,所述将所述未标注样本数据输入至所述初步模型进行预测,得到所述未标注样本数据对应各个预测类别的置信度,包括:
将所述未标注样本数据输入至所述初步模型进行预测,得到所述未标注样本数据归属于各自对应预测类别的概率值;
根据所述概率值确定所述未标注样本数据对应各个预测类别的置信度。
4.根据权利要求3所述的方法,其特征在于,所述根据所述概率值确定所述未标注样本数据对应各个预测类别的置信度,包括:
根据所述未标注样本数据归属于各自对应预测类别的概率值,确定所述各个预测类别下未标注样本数据的概率值;
根据所述各个预测类别下未标注样本数据的概率值和所述各个预测类别下未标注样本数据的数据量,计算所述各个预测类别下未标注样本数据的概率值的均值;
根据所述各个预测类别下未标注样本数据的概率值和所述均值,计算所述各个预测类别下未标注样本数据的概率值的方差;
根据所述方差,所述各个预测类别下未标注样本数据的数据量以及预设误差,确定所述未标注样本数据对应各个预测类别的置信度。
5.根据权利要求1所述的方法,其特征在于,所述预设神经网络模型包括预设双向长短期记忆模型和预设条件随机场模型,所述将所述标注样本数据输入至预设神经网络模型进行训练,得到所述预测模型对应的初步模型,包括:
将所述标注样本数据输入至预设双向长短期记忆模型进行打分,得到所述标注样本数据对应各个预测类别的分类得分;
将所述分类得分输入至预设条件随机场模型进行打分,得到所述标注样本数据对应各个预测类别的转移得分;
计算所述分类得分和所述转移得分之和,得到所述标注样本数据对应各个预测类别的打分值;
根据所述标注样本数据对应各个预测类别的打分值,利用极大似然算法计算所述标注样本数据归属于其对应预测类别的概率值,并迭代更新所述预设双向长短期记忆模型和所述预设条件随机场模型;
当所述标注样本数据归属于其对应预测类别的概率值收敛时,将收敛概率值对应迭代层级的双向长短期记忆模型和条件随机场模型确定为所述初步模型。
6.根据权利要求1所述的方法,其特征在于,所述将更新后的标注样本数据输入至所述初步模型进行迭代训练,得到所述预测模型,包括:
将更新后的标注样本数据输入至所述初步模型进行迭代训练,直至所述各个预测类别的置信度均符合所述预设条件,停止迭代训练,将最终迭代训练得到的模型确定为所述预测模型。
7.根据权利要求1所述的方法,其特征在于,所述标注样本数据对应的数据量小于所述未标注样本数据对应的数据量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910559074.1/1.html,转载请声明来源钻瓜专利网。