[发明专利]基于人工智能的短信数据清洗方法

摘要

本发明公开了一种基于人工智能的短信数据清洗方法，包括以下步骤构建人工智能的短信数据清洗系统；采集所需的短信数据，并对其进行识别，将同一领域的短信数据进行合并；预先设定比较规则，并将同一领域的短信数据逐条读取，与预先设定的比较规则进行比较，从而筛选得到问题数据；将得到的问题数据进行汇总，清洗；对清洗完毕的问题数据进行再确认，将确认无误的清洗数据进行储存。本发明通过构建人工智能的短信数据清洗系统，利用系统完成对短信数据的采集、识别、分类、比较；对错误数据的汇总、清洗及对清洗数据的储存；其清洗流程简单、清洗效率高、准确率高，基于人工智能，避免了人工投入及辅助，清洗投入小，成本低，值得推广。

主权项

基于人工智能的短信数据清洗方法，其特征在于，包括以下步骤：S1、构建人工智能的短信数据清洗系统，包括短信数据采集模块、采集数据识别模块、同领域数据合并模块、中央处理模块、合并数据比较模块、问题数据汇总模块、问题数据清洗模块、清洗结果确认模块和数据仓库储存模块；S2、利用短信数据采集模块采集所需的短信数据，并将采集的短信数据利用采集数据识别模块进行识别，将识别后的短信数据利用同领域数据合并模块将同一领域的短信数据进行合并后传送至中央处理模块；S3、中央处理模块利用合并数据比较模块预先设定比较规则，并将同一领域的短信数据逐条读取，与预先设定的比较规则进行比较，从而筛选得到问题数据；S4、利用问题数据汇总模块将得到的问题数据进行汇总，并利用问题数据清洗模块对问题数据进行清洗，即将残缺数据补全、错误数据纠正，重复数据过滤；S5、利用清洗结果确认模块对清洗完毕的问题数据进行再确认，若确认清洗结果无误，则利用数据仓库储存模块对清洗数据进行储存；若确认清洗结果有误，则将有误的清洗结果进行再次清洗、确认，直至确认无误后即可储存。