[发明专利]商品资源数据获取系统

摘要

本发明提供了一种商品资源数据获取系统，其包括以下步骤商品资源数据清洗模块，通过关键词筛选出商品数据，对筛选出的商品数据进行清洗；数据分类模块，其根据各商品关键词对筛选出的商品数据进行分类并存储；数据格式统一模块，其将所述存储在不同的数据存储器中的不同格式的数据转化为统一格式；数据预处理模块，用于检查所述统一格式的数据并对数据进行处理；数据搜索模块，其确定目标数据的特征值；数据挖掘模块，根据目标数据的具体特征值采用挖掘算法对数据进行处理，将挖掘出的数据附加上标识后导出。本发明通过于商品有关的关键词搜索完成对网络云服务器中的数据筛选，并对数据进行相应的优化处理与格式转化使数据在搜索时的效率更高。

主权项

商品资源数据获取系统，其特征在于，包括以下步骤：商品资源数据清洗模块，用于在各网络云服务器中根据商品关键词筛选出商品数据，对筛选出的商品数据进行清洗；数据分类模块，其根据各商品关键词对筛选出的商品数据进行分类，并分别单独存储在不同的数据存储器中；数据格式统一模块，其将所述存储在不同的数据存储器中的不同格式的数据转化为统一格式；数据预处理模块，用于检查所述统一格式的数据，将含有噪声数据、冗余的数据剔除，对缺省数据进行补充，同时对数据通过二进制数据编码进行标识；数据搜索模块，其确定要发现的数据关键词、数据名称、存储日期、数据长度作为目标数据的特征值；数据挖掘模块，根据目标数据的具体特征值采用挖掘算法对数据进行处理，将挖掘出的数据附加上标识后导出。