[发明专利]利用网络爬行者程序在网上进行价格收集的方法

摘要

本发明公开了一种利用网络爬行者程序在网上进行价格收集的方法，包括：(1)下载压缩资料、(2)搜寻快捷方式、(3)集中化的价格收集、(4)管道式的搜寻与分析及(5)超级代理服务器；藉此，爬行者程序下载的封包可以先压缩，适时地可跳过不必要的中间网页，以改善网络流量，再通过集中式搜寻与互联网共享信息，大幅减低分布式爬行者程序所下载的资料量，并对于具有时间敏感性的产品价格，以管道式的逐项搜寻与分析，则能够得到接近实时的市场状况，且为了确保搜寻过程不中断，可采用超级代理服务器架构，将搜寻要求通过动态选出的公共代理服务器传送，如此价格收集的作业就可以有效率且有效地执行，而且超出以往所能预期的水准。

主权项

1、一种利用网络爬行者程序在网上进行价格收集的方法，包括以下步骤：搜寻快捷方式，通过网络浏览器输入网址快捷方式来搜寻想要寻找的产品，此项快捷方式搜寻法能够降低整个搜寻周期的网络负载量，以大幅加速价格收集程序；集中式的价格收集，其配置中央数据库与局部数据库供爬行者程序存取信息及分享信息，并利用一套中央爬行者程序来收集价格信息，其余多组爬行者程序在绝对需要时才进行搜寻，且只有中央爬行者程序可更新中央数据库，大幅减低分布式爬行者程序所下载的资料量，以减少搜寻互联网的时间与资源。