[发明专利]一种基于网络爬虫的供应商推荐方法

摘要

本发明公开了一种基于网络爬虫的供应商推荐方法，通过采用爬虫技术获取大量的供应商与其提供的企业信息，并通过数据清洗，特征提取，建立特征库。之后与需要进行供应商推荐的企业相关信和企业已有供应商信息特征进行相似度的计算，从而能够提供相应的推荐排序，供企业能够快速的选择适合自己的供应商，从而避免了人为考察供应商，进行大量供应商信息筛选的复杂过程，减少人力、物力的不必要消耗，并且随着数目的增加，推荐系统能够通过学习，从而使得推荐更加准确，这也是未来发展的一个趋势，能够更好的适应企业生产发展的方向。

主权项

1.一种基于网络爬虫的供应商推荐方法，其特征在于，包括以下步骤：步骤1：通过python的分布式爬取框架scrapy‑redis从供应商网站爬取信息，所述信息包含供应商信息和供应商所提供产品的企业信息，并且通过爬虫技术获得需要进行供应商推荐的企业信息，如果企业已经有自己的供应商，则同时获得企业现有的供应商信息；步骤2：进行数据清洗，对爬虫爬到的信息进行清洗，选取相关的特征；步骤3：选择采用基于物品和基于用户的推荐相结合的协同过滤算法；对于爬到的信息清洗之后，如果企业是新成立的企业，并没有属于自己的供应商信息，采用基于用户的推荐算法，对与企业相似的企业进行排序，并通过推荐已有企业的供应商给需要推荐供应商的新的企业；对于已经拥有属于自己的供应商的企业，需要推荐供应商时，采用基于用户和基于物品的协同过滤结合的方法，对需要推荐供应商的企业和其已经存在的供应商信息特征与爬取到的企业与企业拥有的供应商信息特征进行相似度计算，分别按照基于用户和基于物品的协同过滤方法给出两种不同的排序，提供企业选择。