[发明专利]基于大数据和人工智能的信息采集方法及数字内容服务平台

说明书

本申请实施例提供一种基于大数据和人工智能的信息采集方法及数字内容服务平台，通过将至少两个关键运行采集节点业务分层为目标业务分层采集计划，以用于指示对被业务分层的关键运行采集节点所表示的采集页面对象的采集特征项进行采集配置。然后，可采用目标业务分层采集计划更新关键采集节点运行分布，并将更新后的关键采集节点运行分布发送至软件采集计划的采集配置进程，使得软件采集计划的采集配置进程在配置业务功能区采集进程的过程中可按照目标业务分层采集计划的指示对被业务分层的关键运行采集节点所表示的采集页面对象的采集特征项进行采集配置，从而减少采集配置的重调用次数，以节省采集数据的归纳时间并提高采集计划的执行效率。

技术领域

本申请涉及信息采集技术领域，具体而言，涉及一种基于大数据和人工智能的信息采集方法及数字内容服务平台。

背景技术

在信息采集过程中，发明人研究发现目前的采集配置方案中，需要循环对每个关键运行采集节点单独进行采集配置，这就导致每次采集配置的重调用次数较多。然而发明人采集配置发现，事实上通常很多软件功能业务的开发和使用存在业务分层的聚合特点的，如何减少采集配置的重调用次数，以节省采集数据的归纳时间并提高采集计划的执行效率，是本领域亟待解决的技术问题。

发明内容

为了至少克服现有技术中的上述不足，本申请的目的在于提供一种基于大数据和人工智能的信息采集方法及数字内容服务平台，可按照目标业务分层采集计划的指示对被业务分层的关键运行采集节点所表示的采集页面对象的采集特征项进行采集配置，从而减少采集配置的重调用次数，以节省采集数据的归纳时间并提高采集计划的执行效率。

第一方面，本申请提供一种基于大数据和人工智能的信息采集方法，其特征在于，应用于数字内容服务平台，所述数字内容服务平台与多个数字内容订阅设备通信连接，所述方法包括：

获取基于信息推送策略的当前信息推送来源获得的业务功能区采集进程；

获取所述业务功能区采集进程的关键采集节点运行分布中的多个关键运行采集节点的采集大数据标签信息；每个关键运行采集节点用于表示所述业务功能区采集进程在采集准备过程中需要被采集的一个或者多个采集页面对象，且所述每个关键运行采集节点所表示的采集页面对象的采集特征项需要采集激活；任一关键运行采集节点的采集大数据标签信息用于反映所述任一关键运行采集节点和其它关键运行采集节点之间的采集类型关系；

根据各关键运行采集节点的采集大数据标签信息，将至少两个关键运行采集节点业务分层为目标业务分层采集计划，所述目标业务分层采集计划用于指示对被业务分层的关键运行采集节点所表示的采集页面对象的采集特征项进行采集配置；

采用所述目标业务分层采集计划更新所述关键采集节点运行分布，并将更新后的关键采集节点运行分布发送至软件采集计划的采集配置进程，所述更新后的关键采集节点运行分布用于指示所述软件采集计划的采集配置进程按照所述目标业务分层采集计划的指示，在所述业务功能区采集进程的采集准备过程中对所述被业务分层的关键运行采集节点所表示的采集页面对象的采集特征项进行采集配置，并输出采集配置结果。

在第一方面的一种可能的实现方式中，所述多个关键运行采集节点对应一个目标信息采集链，所述目标信息采集链是基于各关键运行采集节点在所述关键采集节点运行分布中的采集链分布关系，采用多条采集迁移链条连接所述各关键运行采集节点得到的；

所述采集链分布关系用于指示：一个关键运行采集节点沿着所述关键采集节点运行分布中的至少一条采集运行链条配合其它关键运行采集节点的采集关系；

任一关键运行采集节点的采集计划数据标签信息包括以下至少一项：所述任一关键运行采集节点的采集计划分区序列和所述任一关键运行采集节点的逆采集计划分区序列；

所述任一关键运行采集节点的采集计划分区序列中的采集计划分区为：从所述目标信息采集链中的最先关键运行采集节点至所述任一关键运行采集节点的所有正向采集方式均覆盖的关键运行采集节点；