[发明专利]一种机器学习平台及基于该平台的数据模型优化方法在审
申请号: | 201811554215.2 | 申请日: | 2018-12-18 |
公开(公告)号: | CN109800277A | 公开(公告)日: | 2019-05-24 |
发明(设计)人: | 陈力;方进锋;孔小飞;徐海燕;邓少宝;陈国礼 | 申请(专利权)人: | 合肥天源迪科信息技术有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F17/50 |
代理公司: | 上海精晟知识产权代理有限公司 31253 | 代理人: | 冯子玲 |
地址: | 230000 安*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种机器学习平台及基于该平台的数据模型优化方法,涉及数据模型评估技术领域。本发明包括:模型构建模块、数据获取模块、数据处理模块、模型评估模块以及模型优化模块;所述模型构建模块包括模型构建单元以及模型发布单元;所述模型构建单元用于模型的搭建;所述模型发布单元将构建好的数据模型发布。本发明通过模型构建模块快速构建数据模型,采用数据获取模块获取源数据并通过数据处理模块处理后提工给数据模型,保证进入到数据模型的数据的有效性、减少模型评估误差,模型评估模块通过输出模型的混淆矩阵和模型准确度对数据模型评估,方便对数据模型的优化。 | ||
搜索关键词: | 数据模型 模型构建模块 模型构建单元 模型评估模块 数据处理模块 数据获取模块 机器学习 模型发布 优化 矩阵 快速构建 模型评估 模型优化 评估技术 输出模型 准确度 获取源 构建 混淆 评估 发布 保证 | ||
【主权项】:
1.一种机器学习平台,其特征在于,包括:模型构建模块、数据获取模块、数据处理模块、模型评估模块以及模型优化模块;所述模型构建模块包括模型构建单元以及模型发布单元;所述模型构建单元用于模型的搭建;所述模型发布单元将构建好的数据模型发布;所述数据获取模块从hdfs大数据集群的mysql数据库获取源数据并写成hive表;所述数据处理模块还包括数据预处理单元以及数据过滤单元;所述数据预处理单元用于对源数据采样、比例拆分、类型转换以及缺失值填充;所述数据过滤单元用于过滤多余记录和字段;所述模型评估模块还包括算法选取单元以及评估单元;所述算法选取单元根据模型特征选取适应的评估算法;所述评估单元根据选取的评估算法对数据模型评估;所述模型优化模块通过精确数据源、调整数据处理方式、调整正负样本、选择更优算法以及调整算法参数对模型优化。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于合肥天源迪科信息技术有限公司,未经合肥天源迪科信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811554215.2/,转载请声明来源钻瓜专利网。