[发明专利]一种电商网站的页面信息获取方法

摘要

本发明公开一种电商网站的页面信息获取方法，该电商网站包括主页面、导航页面、商品页面，其中，主页面具有导航页面URL，导航页面具有商品页面URL，一个导航页面对应一个类别的商品，该方法包括：从主页面提取导航页面URL，从导航页面提取商品页面URL，根据商品页面URL下载商品页面信息。

主权项

1.一种电商网站的页面信息获取方法，其特征在于，该电商网站包括主页面、导航页面、商品页面，其中，主页面具有导航页面URL，导航页面具有商品页面URL，一个导航页面对应一个类别的商品，该方法包括：从主页面提取导航页面URL，从导航页面提取商品页面URL，根据商品页面URL下载商品页面信息，其中，每隔预定的时间间隔从导航页面重新下载商品页面URL，其中下载的商品页面URL按上架时间被排序，其中，通过以下过程对商品页面信息进行更新：按顺序比较最新下载的导航页面的商品页面URL与对应序位历史下载的该导航页面的商品页面URL，当比较结果不相同时，将历史下载的该导航页面的商品页面URL更新为对应序位的最新下载的导航页面的商品页面URL，并下载该最新下载的导航页面的商品页面URL的商品信息；其中，所述从导航页面提取商品页面URL包括：根据商品页面XPath模式从所述导航页面提取匹配XPath模式的URL作为所述商品页面URL。