[发明专利]一种有标注价值的数据样本的确定方法及装置在审
申请号: | 202110953954.4 | 申请日: | 2021-08-19 |
公开(公告)号: | CN113657510A | 公开(公告)日: | 2021-11-16 |
发明(设计)人: | 纪忠光;凌芳觉 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06K9/62 | 分类号: | G06K9/62 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 周嗣勇 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 标注 价值 数据 样本 确定 方法 装置 | ||
1.一种有标注价值的数据样本的确定方法,包括:
获取未标注数据样本集合;任一未标注数据样本i包括一个特征向量值xi;
根据{xi|i=1、2、3……n,n=未标注数据样本集合的样本数量}的分布,确定针对特征向量值x的概率密度函数f(x);
针对任一未标注数据样本i,确定该样本的特征向量值xi,利用f(x)计算f(xi);根据f(xi)确定该数据样本的标注价值度,若标注价值度大于预设值,则确定该数据样本具有标注价值;其中,f(xi)越小,未标注数据样本i的标注价值越大。
2.如权利要求1所述的方法,根据f(xi)确定该数据样本的标注价值度,包括:
获取构建完成的预测模型,所述预测模型利用已标注数据样本集合训练得到;
针对任一未标注数据样本i,将xi输入至所述预测模型,根据所述预测模型的输出结果,确定所述预测模型针对该数据样本的预测结果不确定度;根据f(xi)以及该数据样本的不确定度,确定该数据样本的标注价值度。
3.如权利要求1所述的方法,根据f(xi)确定该数据样本的标注价值度,包括:
获取已标注数据样本集合;
针对任一未标注数据样本i,根据xi与已标注数据样本集合中各个已标注数据样本的特征向量值,得到该数据样本与已标注数据样本集合的特征差异度;根据f(xi)以及该数据样本的特征差异度,确定该数据样本的标注价值度。
4.如权利要求1所述的方法,确定针对特征向量值x的概率密度函数f(x),包括:
利用核密度函数,确定针对特征向量值x的概率密度函数f(x)。
5.一种预测模型构建方法,包括:
获取未标注数据样本集合以及已标注数据样本集合;循环执行以下步骤,直至满足预设条件:
将当前已标注数据样本作为训练样本构建预测模型;
利用如权利要求1-4任一所述的方法,确定当前未标注数据样本集合中任一未标注数据样本是否具有标注价值,得到有标注价值数据样本集合;
为有标注价值数据样本集合中的样本添加标签,并将有标注价值数据样本集合从未标注数据样本集合移至已标注数据样本集合;
循环执行完成后,将当前预测模型作为训练完成的预测模型。
6.一种有标注价值的交易样本的确定方法,包括:
获取未标注交易样本集合;任一未标注交易样本j包括一个交易特征向量值xj;
根据{xj|j=1、2、3……m,m=未标注交易样本集合的样本数量}的分布,确定针对特征向量值x的概率密度函数f(x);
针对任一未标注交易样本j,确定该交易样本的特征向量值xj,利用f(x)计算f(xj);根据f(xj)确定该交易样本的标注价值度,若标注价值度大于预设值,则确定该交易样本具有标注价值;其中,f(xj)越小,未标注交易样本j的标注价值越大。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110953954.4/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置