[发明专利]一种搜索网页的方法和装置

摘要

本发明公开了一种搜索网页的方法和装置，属于网络技术领域。所述方法包括：根据第一网页地址，访问所述第一网页地址指示的网页；获取访问的所述网页的网页信息；从所述网页信息中提取第二网页地址。本发明通过根据已经获得的第一网页地址，访问该第一网页地址指示的网页，获取到访问网页的网页信息，每个网页的网页信息中含有大量网页地址信息，通过遍历此网页信息，从网页信息中提取大量第二网页地址，解决了现有技术中手动搜索网页方法搜索网页的数量受到局限、效率低下的问题，同时解决了现有技术中手动搜索网页方法成本高的问题。

主权项

1.一种搜索网页的方法，其特征在于，所述方法包括：获取每次在进行搜索网页过程中所使用的线程数以及每次搜索网页过程的搜索速度；根据获取到的线程数以及获取到的搜索速度确定最优线程数；根据符合所述最优线程数的多个第一网页地址，并行访问所述多个第一网页地址指示的网页；获取访问的所述网页的网页信息；遍历所述网页的网页信息，在遍历过程中提取获取到的网页信息中的超文本引用外部链接中的网页地址，将所述超文本引用外部链接中的网页地址作为第二网页地址；将提取到的所述第二网页地址作为所述第一网页地址再次执行搜索网页过程，并对获取到的网页信息进行分析，得到所述获取到的网页信息中各个类型信息的数据量，根据访问需要以及所述各个类型信息的数据量对网页浏览方法进行设置和调整。