[发明专利]数据采集量的监测方法、系统、电子设备及存储介质

摘要

本发明公开了一种数据采集量的监测方法、系统、电子设备及存储介质，该方法包括：获取包括若干条采集数据的采集数据源；根据每一条采集数据分别获取字段信息，字段信息包括标签值、配置cid和详情页数据量；分别判断标签值是否等于预设值；不等于预设值则过滤采集数据；等于预设值则将字段信息存入MySQL数据库得到有效数据集；遍历有效数据集中所有配置cid，根据每一个配置cid查询所对应的频道URL数据量；将配置cid所对应的数据量相加得到频道URL总数据量；判断总数据量是否大于预设URL数量；若总数据量不大于预设URL数量则根据配置cid的详情页数据量进行数据监测；若总数据量大于预设URL数量则根据配置cid的频道URL数据量进行数据监测，实现了数据量的自动监测。