[发明专利]基于历史行为的数据增强方法、装置、设备以及存储介质有效
申请号: | 202010944736.X | 申请日: | 2020-09-10 |
公开(公告)号: | CN112085103B | 公开(公告)日: | 2023-06-27 |
发明(设计)人: | 付琰;陈亮辉;甘露;周洋杰;方军 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F18/214 | 分类号: | G06F18/214;G06F18/22 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 历史 行为 数据 增强 方法 装置 设备 以及 存储 介质 | ||
本申请实施例公开了一种基于历史行为的数据增强方法、装置、设备以及存储介质,涉及大数据技术领域。该基于历史行为的数据增强方法的一具体实施方式包括:获取用户当前时间的样本数据;确定第一时间间隔,以及获取用户在第一时间间隔前的第一历史样本数据;确定当前时间的样本数据与第一历史样本数据的第一分布距离,若第一分布距离小于预定的最小分布距离,则将第一历史样本数据作为增强数据集,从而基于真实用户的历史行为构造训练样本,实现数据增强,为后续对机器学习模型的训练提供更大帮助。
技术领域
本申请涉及计算机技术领域,具体涉及大数据技术领域,尤其涉及基于历史行为的数据增强方法、装置、设备以及存储介质。
背景技术
训练数据对机器学习模型非常重要,通常来说训练数据越多,机器学习模型的效果越好。在实际的应用中,有标注的训练数据很难收集到,因此需要对现有的训练数据进行补充。
对于图像数据,通常通过对原始图片进行翻转、旋转、随机裁剪、局部变形等方法对数据进行扩充。对于文本类型的数据,通常使用近义词替换、随机插入词、随机交换位置等方式对数据进行扩充。但是,对于包含时间特征的表格型数据,通常很难收集到大量的真实样本,现有的方法是使用SMOTE、GAN等算法生成一些伪样本。
发明内容
为了解决上述背景技术部分提到的一个或多个技术问题,本申请实施例提供了基于历史行为的数据增强方法、装置、设备以及存储介质。
第一方面,本申请实施例提供了基于历史行为的数据增强方法,包括:获取用户当前时间的样本数据;确定第一时间间隔,以及获取用户在所述第一时间间隔前的第一历史样本数据;确定所述当前时间的样本数据与所述第一历史样本数据的第一分布距离,若所述第一分布距离小于预定的最小分布距离,则将所述第一历史样本数据作为增强数据集。
第二方面,本申请实施例提供了基于历史行为的数据增强装置,包括:获取模块,被配置为获取用户当前时间的样本数据;第一时间间隔确定模块以及第一获取模块,被配置为确定第一时间间隔,以及获取用户在所述第一时间间隔前的第一历史样本数据;第一分布距离确定模块,被配置为确定所述当前时间的样本数据与所述第一历史样本数据的第一分布距离,若所述第一分布距离小于预定的最小分布距离,则将所述第一历史样本数据作为增强数据集。
第三方面,本申请实施例提出了一种电子设备,包括:至少一个处理器;以及与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行如第一方面中任一实现方式描述的方法。
第四方面,本申请实施例提出了一种存储有计算机指令的非瞬时计算机可读存储介质,计算机指令用于使计算机执行如第一方面中任一实现方式描述的方法。
本申请实施例提供的基于历史行为的数据增强方法、装置、设备以及存储介质,首先获取用户当前时间的样本数据;之后确定第一时间间隔,以及获取用户在所述第一时间间隔前的第一历史样本数据;最后确定所述当前时间的样本数据与所述第一历史样本数据的第一分布距离,若所述第一分布距离小于预定的最小分布距离,则将所述第一历史样本数据作为增强数据集,从而基于真实用户的历史行为构造训练样本,实现数据增强,为后续对机器学习模型的训练提供更大帮助。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显。附图用于更好地理解本方案,不构成对本申请的限定。其中:
图1是本申请可以应用于其中的示例性系统架构图;
图2是根据本申请的基于历史行为的数据增强方法的一个实施例的流程示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010944736.X/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置