[发明专利]数据处理方法和装置在审
申请号: | 202010655992.7 | 申请日: | 2020-07-08 |
公开(公告)号: | CN111767277A | 公开(公告)日: | 2020-10-13 |
发明(设计)人: | 陈海波 | 申请(专利权)人: | 深延科技(北京)有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/22;G06F16/2458;G06N20/00 |
代理公司: | 常州佰业腾飞专利代理事务所(普通合伙) 32231 | 代理人: | 姜晓钰 |
地址: | 100081 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种数据处理方法和装置,所述数据处理方法包括以下步骤:S1,获取包含多个表格的初始数据集,并对初始数据集进行预处理以去除至少一个表格中相应属性的数据信息;S2,通过多表连接将预处理后的数据集中存在联系的表格进行合并;S3,对多表连接后的数据集进行采样以缩减数据集的大小;S4,通过自动化特征工程获取采样后的数据集中的高阶特征或特征间的组合,以得到包含新特征的数据集;S5,通过自动特征选择过滤掉新特征中的无效特征,以得到包含目标特征的待训练/测试数据集。本发明能够在保证数据有效性的前提下减小数据量,避免内存溢出,并提高后续模型训练和测试的速度,从而能够在限定时间和内存下完成机器学习流程。 | ||
搜索关键词: | 数据处理 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深延科技(北京)有限公司,未经深延科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010655992.7/,转载请声明来源钻瓜专利网。
- 上一篇:一种PVC外墙挂板制造工艺
- 下一篇:用电管理智能芯片架构