[发明专利]一种基于特征工程的数据挖掘方法及系统在审

专利信息
申请号: 202110749005.4 申请日: 2021-07-01
公开(公告)号: CN113486086A 公开(公告)日: 2021-10-08
发明(设计)人: 祖玉宁 申请(专利权)人: 上海硕恩网络科技股份有限公司
主分类号: G06F16/2458 分类号: G06F16/2458;G06F17/16;G06F17/18
代理公司: 北京睿智保诚专利代理事务所(普通合伙) 11732 代理人: 韩迎之
地址: 200003 上海*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 特征 工程 数据 挖掘 方法 系统
【权利要求书】:

1.一种基于特征工程的数据挖掘方法,其特征在于,具体步骤包括如下:根据数据挖掘请求确定特征因子;

获取数据集,基于所述特征因子对所述数据集进行分类,分为相关数据和无关数据,并剔除无关数据;

利用所述相关数据确定关联度,根据所述关联度进行二次剔除,得到第一挖掘数据;

构建多元回归方程,并确定误差允许边界;

判断第一挖掘数据是否在误差允许边界内,若在,则输出第一挖掘数据;若不在,则输出第二挖掘数据,所述第二挖掘数据为剔除误差允许边界外之后的第一挖掘数据。

2.根据权利要求1所述的一种基于特征工程的数据挖掘方法,其特征在于,根据数据挖掘请求确定特征因子具体步骤包括:

构建特征因子确定函数模型;

输入数据至少两次,并且前后两次输入的数据仅有一个特征因子不同;

根据所述特征因子确定函数模型,确定特征因子。

3.根据权利要求1所述的一种基于特征工程的数据挖掘方法,其特征在于,得到第一挖掘数据的具体步骤包括:

将所述相关数据构建特征方程,得到特征矩阵A;

确定关联度,构建关联度矩阵B;

根据G=A×B,得到第一挖掘数据矩阵G。

4.根据权利要求1所述的一种基于特征工程的数据挖掘方法,其特征在于,所述多元回归方程具体表达式为:

y=β01x12x2+...+βnxn

其中,β0,β1,β2,...,βn表示回归系数;x1,x2,...,xn为二次剔除后的特征因子。

5.根据权利要求1所述的一种基于特征工程的数据挖掘方法,其特征在于,确定误差允许边界的具体步骤包括:

提取多元回归方程在坐标系中的坐标组;

通过预设的边界直线函数拟合算法确定边界函数;

任选其中一个坐标组,计算所述坐标组到边界函数的距离值;

判断所述距离值与预设的距离阈值的大小,确定是否为误差允许边界内的坐标点。

6.一种基于特征工程的数据挖掘系统,其特征在于,包括:

特征因子确定模块,用于根据数据挖掘请求确定特征因子;

数据集获取模块,用户获取数据集,基于所述特征因子对所述数据集进行分类,分为相关数据和无关数据,并剔除无关数据;

二次剔除模块,利用所述相关数据确定关联度,根据所述关联度进行二次剔除,得到第一挖掘数据;

边界确定模块,构建多元回归方程,并确定误差允许边界;

判断第一挖掘数据是否在误差允许边界内,若在,则输出第一挖掘数据;若不在,则输出第二挖掘数据,所述第二挖掘数据为剔除误差允许边界外之后的第一挖掘数据。

7.根据权利要求6所述的一种基于特征工程的数据挖掘系统,其特征在于,所述特征因子确定模块包括:特征因子函数单元、变量输入单元和特征因子输出单元,所述特征因子函数单元构建特征因子确定函数模型;通过所述变量输出单元输入数据至少两次,并且前后两次输入的数据仅有一个特征因子不同;根据所述特征因子确定函数模型,确定特征因子并利用所述特征因子输出单元输出。

8.根据权利要求6所述的一种基于特征工程的数据挖掘系统,其特征在于,二次剔除模块包括:关联度确定单元、特征确定单元和第一挖掘数据输出单元;所述特征确定单元将所述相关数据构建特征方程,得到特征矩阵A;

所述关联度确定单元确定关联度,构建关联度矩阵B;

所述第一挖掘数据输出单元,根据G=A×B,得到第一挖掘数据矩阵G。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海硕恩网络科技股份有限公司,未经上海硕恩网络科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110749005.4/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top