[发明专利]一种交通信息处理方法及装置

说明书

本发明实施例提供一种交通信息处理方法及装置。涉及信息技术领域，本发明实施例能够快速、高效的从不同类型的数据源中获取交通信息。该方法包括：确定用于采集交通信息的待搜索数据源；判断是否需要登录信息才能访问所述待搜索数据源的页面，并根据判断结果选择相应的访问方式访问所述页面；判断在所述待搜索数据源中交通信息是否包含在异步加载数据中，并根据判断结果在访问所述页面时选择相应的页面加载方式加载所述页面；在所述页面加载完成后，按照预设采集方式从所述页面中采集交通信息。本发明应用于交通信息处理。

技术领域

本发明涉及信息技术领域，尤其涉及一种交通信息处理方法及装置。

背景技术

目前，现有技术中已经开始通过利用网络爬虫从网络中获取交通信息的方式，来获取实时性、准确性更强的交通信息。其实现原理一般为：通过事先创建好的网络爬虫，对网络中预设数据源所提供的事件信息进行搜索，当从中爬取到交通方面的信息时则进行保存，从而实现从网络中自动获取交通信息的功能。

发明人发现：在上述现有技术中，由于不同数据源的页面结构、访问方式以及加载方式也不尽相同，所以在上述现有技术实际应用时需要开发人员每次都要根据预设数据源的页面结构、访问方式以及加载方式修改代码，以开发出针对不同数据源的网络爬虫程序，以便将网络爬虫配置到不同的数据源中自动爬取交通信息。这样一来，在爬取交通信息时就只能针对不同数据源分别进行数据爬取，而无法统一对多个数据源进行管理，操作复杂并且信息获取的效率低下。针对上述问题，本发明提供一种更加快捷、高效的交通信息处理方法。

发明内容

本发明提供一种交通信息处理方法及装置，能够快速、高效的从不同类型的数据源中获取交通信息。

为达到上述目的，本发明的实施例采用如下技术方案：

第一方面，本发明实施例提供一种交通信息处理方法，包括：确定用于采集交通信息的待搜索数据源；判断是否需要登录信息才能访问所述待搜索数据源的页面，并根据判断结果选择相应的访问方式访问所述页面；判断在所述待搜索数据源中交通信息是否包含在异步加载数据中，并根据判断结果在访问所述页面时选择相应的页面加载方式加载所述页面；在所述页面加载完成后，按照预设采集方式从所述页面中采集交通信息。

可选的，判断是否需要登录信息才能访问所述待搜索数据源的页面，具体包括：在数据库中查找所述待搜索数据源对应的配置信息；其中，所述数据库中包含有多个数据源对应的配置信息；所述多个数据源中包含所述待搜索数据源；根据所述待搜索数据源对应的配置信息，确定是否需要登录信息才能访问所述待搜索数据源的页面；所述根据判断结果选择相应的访问方式访问所述页面，具体包括：若确定需要登录信息才能访问所述待搜索数据源的页面，则从所述待搜索数据源对应的配置信息中查询所述待搜索数据源的登录信息，并利用所述登录信息访问所述页面；若确定不需要登录信息才能访问所述待搜索数据源的页面，则直接访问所述页面。

可选的，所述判断在所述待搜索数据源中交通信息是否包含在异步加载数据中，具体包括：在数据库中查找所述待搜索数据源对应的配置信息；其中，所述数据库中包含有多个数据源对应的配置信息；根据所述待搜索数据源对应的配置信息，确定在所述待搜索数据源中交通信息是否包含在异步加载数据中；所述，根据判断结果在访问所述页面时选择相应的页面加载方式加载所述页面，具体包括：若确定在所述待搜索数据源中交通信息包含在异步加载数据中，则在访问所述页面时调用浏览器驱动加载所述异步加载数据，以使得在所述页面加载完成后，按照预设采集方式从所述异步加载数据中采集交通信息；若确定在所述待搜索数据源中交通信息没有包含在异步加载数据中，则在访问所述页面时加载所述页面的同步加载数据，以使得在所述页面加载完成后，按照预设采集方式从所述同步加载数据中采集交通信息。