[发明专利]一种数据的扩充方法、装置、存储介质和电子设备在审
申请号: | 201911403282.9 | 申请日: | 2019-12-30 |
公开(公告)号: | CN110941603A | 公开(公告)日: | 2020-03-31 |
发明(设计)人: | 赵耕弘;崔朝辉;赵立军;张霞 | 申请(专利权)人: | 东软集团股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/215;G06N20/00 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 赵晓荣 |
地址: | 110179 辽*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 扩充 方法 装置 存储 介质 电子设备 | ||
本申请公开了一种数据的扩充方法、装置、存储介质和电子设备,涉及数据处理技术领域,应用于扩充监督学习过程中使用的训练样本的数据集合,该方法包括:获取待扩充数据集合的中心数据点与边缘数据点之间的距离D;确定正常数据集合中在D的范围内数据密度最大的数据点为正常数据集合的第一参考点,数据密度为以数据点为中心,在给定的范围内包括的数据点的数量;确定正常数据集合中数据密度大于预设阈值且与第一参考点距离最大的数据点为第二参考点,并获取第一参考点和第二参考点之间的参考距离r;利用中心数据点、第一参考点对应的数据密度ρ和参考距离r扩充待扩充数据集合的数据。利用该方法能够合理的扩充数据集合中的数据。
技术领域
本申请涉及数据处理技术领域,尤其涉及一种数据的扩充方法、装置、存储介质和电子设备。
背景技术
随着人工智能产业的不断发展,机器学习作为重要的计算手段在各行各业中被广泛应用。其中,监督学习作为常用手段之一,在各个场景中起到了重要的作用。
监督学习能够利用带标签的数据集合调整模型的参数,使训练后的模型达到所要求的性能。但是,在很多场景的实际应用过程中,不同标签的数据集合中数据的数量通常不均衡,例如有些数据集合中的数据很多,有些数据集合中的数据很少,这些不均衡的数据集合在实际应用过程中会严重影响训练得到的模型的性能。
因此,当数据集合中的数据较少时,需要一种数据的扩充方法以使数据的数量达到正常水平。
发明内容
为了解决现有技术存在的上述技术问题,本申请提供了一种数据的扩充方法、装置、存储介质和电子设备,能够合理的扩充数据集合中的数据。
本申请提供了一种数据的扩充方法,应用于扩充监督学习过程中使用的训练样本的数据集合,包括:
获取待扩充数据集合的中心数据点与边缘数据点之间的距离D,数据集合的中心数据点与同一数据集合的其它数据点的距离之和最小,边缘数据点与同一数据集合的其它数据点的距离之和最大;
确定正常数据集合中在所述D的范围内数据密度最大的数据点为所述正常数据集合的第一参考点,所述数据密度为以数据点为中心,在给定的范围内包括的数据点的数量;
确定所述正常数据集合中数据密度大于预设阈值且与所述第一参考点距离最大的数据点为第二参考点,并获取所述第一参考点和所述第二参考点之间的参考距离r;
利用所述中心数据点、所述第一参考点对应的数据密度ρ和所述参考距离r扩充所述待扩充数据集合的数据。
可选的,当存在N个正常数据集合,所述N为大于或等于1的整数时,所述利用所述中心数据点、所述第一参考点对应数据密度ρ和所述参考距离r扩充所述待扩充数据集合的数据,具体包括:
获取N个所述正常数据集合的第一参考点对应的数据密度中的最小值ρmin和所述参考距离中的最小值rmin;
以所述ρmin为所述待扩充数据集合的数据密度,以所述中心数据点为所述待扩充数据集合的中心,在所述rmin的范围内扩充所述待扩充数据集合的数据。
可选的,当第i个正常数据集合中存在M个在所述D的范围内数据密度最大的数据点,所述i=1,2…N,所述M为大于或等于2的整数时,所述方法还包括:
获取所述第i个正常数据集合的中心数据点与边缘数据点;
确定第j个所述数据密度最大的数据点与所述第i个正常数据集合的中心数据点与边缘数据点的距离之和,所述j=1,2…M;
确定所述距离之和最小的数据点为所述第i个正常数据集合的第一参考点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东软集团股份有限公司,未经东软集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911403282.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种回旋加速器用辐射防护屏蔽装置
- 下一篇:一种数据管理方法、装置及设备
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置