[发明专利]页面数据处理方法、装置、电子设备及存储介质有效
申请号: | 202211110267.7 | 申请日: | 2022-09-13 |
公开(公告)号: | CN115455272B | 公开(公告)日: | 2023-07-11 |
发明(设计)人: | 周翔;冯莉颖 | 申请(专利权)人: | 共青科技职业学院 |
主分类号: | G06F16/953 | 分类号: | G06F16/953;G06F16/9538;G06F16/332;G06F40/30;G06F40/242;G06F40/289 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 何世磊 |
地址: | 330000 江*** | 国省代码: | 江西;36 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 页面 数据处理 方法 装置 电子设备 存储 介质 | ||
1.一种页面数据处理方法,其特征在于,包括:
获取预设筛查信息的控制指令;其中,所述预设筛查信息包括词义筛查条件、数据筛选条件及预设阈值;
根据所述词义筛查条件从待筛查页面中筛查出目标页面;具体地,将所述词义筛查条件采取分词方式以获取与所述控制指令相符的筛查关键词;针对所述筛查关键词进行标准化处理转换成符合预设词典内的标准查询词;根据所述标准查询词从所述待筛查页面中筛查出符合所述词义筛查条件目标页面;
针对所述目标页面中的数据文本进行识别以获取待处理数据;其中,所述待处理数据包括目标数据和非目标数据;具体地,针对所述目标页面中的表类数据进行抓取以获取待处理图片;针对所述待处理图片进行预处理以获取预处理图像;针对所述预处理图像进行识别处理以获取所述待筛查页面中所需的待处理数据;
根据所述数据筛选条件从所述待处理数据中剔除所述非目标数据,以筛选出所述目标数据;具体地,将所述数据筛选条件所包含的字符进行分割处理以获取多个配置字符;基于所述多个配置字符从预设条件库中筛选出与所述数据筛选条件适配的目标条件式;将所述目标条件式在所述待处理数据中所对应的数据进行保留以归集形成所述目标数据,且将所述待处理数据中未被归集的所述非目标数据丢弃,以使从所述待处理数据中筛选出所述目标数据;
根据所述目标数据与所述预设阈值的关系,针对所述目标数据进行相应的处理。
2.根据权利要求1所述的页面数据处理方法,其特征在于,所述预处理包括灰度处理及图像增强处理。
3.根据权利要求1所述的页面数据处理方法,其特征在于,所述根据所述目标数据与所述预设阈值的关系,针对所述目标数据进行相应的处理的步骤具体包括:
将所述目标数据中的数据逐一与所述预设阈值求差得到差值,判断所述差值是否小于零;
若是,则将所述差值小于零所对应的所述目标数据输出,并推送输出的所述目标数据对应的所述目标页面。
4.根据权利要求3所述的页面数据处理方法,其特征在于,所述判断所述差值是否小于零的步骤之后,所述方法还包括:
若判断所述差值不小于零,则将所述差值不小于零所对应的所述目标数据丢弃,并输出无符合所述预设筛查信息的提示信息。
5.一种页面数据处理装置,其特征在于,包括:
获取模块,用于获取预设筛查信息的控制指令;其中,所述预设筛查信息包括词义筛查条件、数据筛选条件及预设阈值;
筛查模块,用于根据所述词义筛查条件从待筛查页面中筛查出目标页面;具体地,将所述词义筛查条件采取分词方式以获取与所述控制指令相符的筛查关键词;针对所述筛查关键词进行标准化处理转换成符合预设词典内的标准查询词;根据所述标准查询词从所述待筛查页面中筛查出符合所述词义筛查条件目标页面;
识别模块,用于针对所述目标页面中的数据文本进行识别以获取待处理数据;其中,所述待处理数据包括目标数据和非目标数据;具体地,针对所述目标页面中的表类数据进行抓取以获取待处理图片;针对所述待处理图片进行预处理以获取预处理图像;针对所述预处理图像进行识别处理以获取所述待筛查页面中所需的待处理数据;
筛选模块,用于根据所述数据筛选条件从所述待处理数据中剔除所述非目标数据,以筛选出所述目标数据;具体地,将所述数据筛选条件所包含的字符进行分割处理以获取多个配置字符;基于所述多个配置字符从预设条件库中筛选出与所述数据筛选条件适配的目标条件式;将所述目标条件式在所述待处理数据中所对应的数据进行保留以归集形成所述目标数据,且将所述待处理数据中未被归集的所述非目标数据丢弃,以使从所述待处理数据中筛选出所述目标数据;
处理模块,用于根据所述目标数据与所述预设阈值的关系,针对所述目标数据进行相应的处理。
6.一种电子设备,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4中任一项所述的页面数据处理方法。
7.一种存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1至4中任一项所述的页面数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于共青科技职业学院,未经共青科技职业学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211110267.7/1.html,转载请声明来源钻瓜专利网。