[发明专利]基于xpath的数据采集方法、电子设备及存储介质

摘要

本发明公开了一种基于xpath的数据采集方法、系统、电子设备及存储介质，该方法对列表页点击元素的xpath路径进行合并，提取共同路径，得到列表页合并路径；根据列表页合并路径得到与该合并路径具有相同路径的列表，生成列表页链接集合；进入一个链接所对应的详情页中，根据详情页的页面采集对象确定采集模式，包括分组采集和不分组采集模式；根据详情页点击元素的xpath路径通过文本提取的方式进行文本信息的提取，得到详情页点击元素所对应的文本信息；根据详情页点击元素xpath路径和所对应的文本信息自动生成采集代码，分别进入列表页链接集合中的每一个链接进行数据采集，这样便完成了列表页中所有链接的数据采集，无需人工编写采集代码，实现了自动采集数据。