[发明专利]基于多平台、多供应商的搜索比价方法

说明书

技术领域

本发明涉及一种能够与网络和软件相结合的搜索比价方法，尤其涉及一种基于多平台、多供应商的搜索比价方法。

背景技术

随着中国电子商务的不断的飞速发展，各种各样的电子商务网站也因时而生。与此同时，越来越多的消费者也渐渐的接受、渐渐的喜欢上了网上购物。网上购物不仅代表着可以购买到经济实惠的商品，更重要的是它代表了一种新的潮流、新的消费方式。

网上购物，在为消费者节省成本的同时，也给消费者带来了新的“成本”——花费大量的时间浏览大量的网站，学习怎样提交查询和管理自己的订单。另外，每个网站都含有大量的不同种类的商品，用户要选购商品就不得不在大量网站内进行复杂的搜索，比较每种商品的报价、折扣和其它优惠措施。因此，用户很希望电子商务系统具有这样一种功能来帮助他们完成对商品的选购，这种功能可以发现大量网络上的购物网站，帮助用户获取大量的商品信息以选购商品。

08年以前，当中国大陆的电子商务还在C2C时代，绝大部分人想到网上购物除了当当卓越之外就是淘宝。所以大部分人的行为，会先上淘宝去看一下，想要购买的商品一般行情是多少。简单的搜索一下，买家很快就对该商品的市场行情有心里有数了。在这种情况下，独立的购物比价引擎是没有生存空间的。然而，09年的B2C购物网站大量兴起，这种格局即将改变。网民开始涌向大量出现的网店，而这些网店的商品价格资料在淘宝却无法取得。

什么是搜索比价系统：

搜索比价系统属于行业垂直搜索引擎。行业垂直搜索是传统门户类搜索引擎的补充与深入，可以更专注于为不同行业市场用户提供信息搜索的深度服务，在数据搜索量、搜索范围、反应速度、价格实时性、数据详细程度、过滤排序功能的易用性等诸多方面确立了深度服务的优势。

技术角度而言，行业垂直类搜索也易于实现。只需要抓取同行业内的网站、论坛、社区的相关信息，定期抓取和更新数据。数据量不大，开发成本比起传统门户类搜索引擎小很多。

发明内容

旅游类搜索比价系统是搜索比价系统中发展比较迅猛的行业垂直类搜索之一，包括机票、酒店、度假等多个搜索产品。其中又以机票比价搜索竞争最为激烈，机票搜索范围可以涵盖中国国际航空公司、南方航空公司、春秋航空公司、同程网、艺龙旅行网、快乐E行、上海不夜城、芒果网、携程旅行网等100多家航空公司和各大在线订票网站。

本发明的目的就是为了解决现有技术中存在的上述问题，提供一种基于多平台、多供应商的搜索比价方法

本发明的目的通过以下技术方案来实现：

基于多平台、多供应商的搜索比价方法，其中：根据用户指定的商品信息，通过爬虫系统比较各个大型网站的价格信息，将各个网站的价格信息按照参考条件进行排序，或是用户指定排序的条件进行排序；之后，汇入数据库建立索引系统；当用户发出某个查询条件时，前台系统调用数据索引系统提供的数据查询接口进行数据查询，同时将用户查询的条件提交给爬虫系统进行抓取最新的数据；当用户看到搜索结果之后，通过点击单条结果既可引导至本价格原本所在的目标网站中，用户在目标网站上用户能看到该商品更为详细的相关信息。

上述的基于多平台、多供应商的搜索比价方法，其中：所述的爬虫系统采用基于数据抽取器的分布式系统结构；爬虫系统通过管理员提供的Web接口作为管理门户，实现的功能包括查看中心和子服务器的日志、设置添加主题、更新某个主题的URL种子、配置主题的抓取频率参量，控制爬虫状态。

进一步地，上述的基于多平台、多供应商的搜索比价方法，其中：所述的爬虫系统采用主体中心节点模块和分布爬虫模块，完成主题操作、数据抽取、页面分析以及目标页面数据的存储；所述主体中心节点模块是控制中枢，包括有主题控制模块，所述主题控制模块的主输出端连接有URL控制器；所述主题控制模块的副输出端连接抽取器学习模块；所述的分布爬虫模块是爬取的具体实施者，包括URL控制器；所述URL控制器的主输入端连接有数据抽取器；所述数据抽取器的数据输入端连接有搜索控制器；所述的搜索控制器输入端设置有网页抓取器；所述网页抓取器的输出端设置有日志模块。

更进一步地，上述的基于多平台、多供应商的搜索比价方法，其中：所述的建立索引为采用Lucene建立索引，将倒转的索引存储在定制的文件格式中；所述文件格式被高度优化以确保能被搜索器快速的加载以及有效的搜索。