[发明专利]数据处理方法、装置、存储介质和计算设备

说明书

本申请的实施方式提供了一种数据处理方法、装置、存储介质和计算设备。数据处理方法包括：接收待处理数据；基于多个策略以及所述多个策略之间的依赖关系，对所述待处理数据进行检测，获得检测结果；其中所述多个策略以及所述多个策略之间的依赖关系属于有向无环图关系，所述多个策略分别对应有向无环图中的各个节点，所述多个策略之间的依赖关系对应所述有向无环图中的各个有向边。利用本申请的实施例能够实现灵活高效的数据处理。

技术领域

本申请的实施方式涉及信息技术领域，更具体地，本申请的实施方式涉及数据处理方法、装置、存储介质和计算设备。

背景技术

本部分旨在为权利要求书中陈述的本申请的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

通常，在反垃圾、风险控制、垃圾邮件过滤、有害信息提示等与信息安全相关的应用场景下，需要构建相适应的安全架构，确保信息发布、信息交互等的安全合规。以反垃圾(Anti-spam)技术为例，是以文本识别、图片识别、语音识别等为基础，通过将数据与违规敏感数据库进行比对命中违规内容。反垃圾系统可涉及多种检测策略，例如黑/白名单识别、敏感词识别、小语种识别等，依据不同策略的组合，反垃圾结果也会有所不同，而策略的组合方式主要依赖于对策略的配置方式。目前，大多数反垃圾系统的策略配置方式较为固定，难以灵活调整，并且无法兼顾不同策略之间执行效率的差异，已对反垃圾检测的吞吐量造成不当限制。

发明内容

本申请期望提供一种数据处理方法、装置、存储介质和计算设备，以解决存在的至少一种技术问题。

第一方面，本申请实施例提供一种数据处理方法，包括：

接收待处理数据；

基于多个策略以及所述多个策略之间的依赖关系，对所述待处理数据进行检测，获得检测结果；

其中，所述多个策略以及所述多个策略之间的依赖关系属于有向无环图关系，所述多个策略分别对应有向无环图中的各个节点，所述多个策略之间的依赖关系对应所述有向无环图中的各个有向边。

根据本申请实施例的数据处理方法，在所述基于多个策略以及所述多个策略之间的依赖关系，对所述待处理数据进行检测之前，所述方法还包括：根据所述待处理数据配置和/或调整所述多个策略以及所述多个策略之间的依赖关系，获得所述有向无环图。

根据本申请实施例的数据处理方法，所述基于多个策略以及所述多个策略之间的依赖关系，对所述待处理数据进行检测，包括：从一个或多个无依赖的节点上的策略开始，对所述待处理数据进行检测，其中，在基于单个节点上的策略产生检测结果后，如果所述检测结果落入任一有向边对应的结果集合，则根据所述有向边确定下游节点，并根据所述下游节点所对应的策略继续对所述待处理数据进行检测。

根据本申请实施例的数据处理方法，如果所述检测结果未落入任一有向边对应的结果集合，则将所述单个节点标记为已执行检测，并将所述单个节点的全部下游节点标记为已执行检测。

根据本申请实施例的数据处理方法，所述多个策略中的每个策略对应一个权重集合，其中单个策略的权重集合中的每一个权重值对应所述单个策略的一种检测结果。

根据本申请实施例的数据处理方法，在所述基于多个策略以及所述多个策略之间的依赖关系，对所述待处理数据进行检测之后，所述方法还包括：根据所述多个策略分别产生的检测结果以及各个检测结果对应的权重值，确定所述待处理数据的检测结果。

根据本申请实施例的数据处理方法，所述根据所述多个策略分别产生的检测结果以及各个检测结果对应的权重值，确定所述待处理数据的检测结果，包括：在所述多个策略分别产生的检测结果中，以最大权重值对应的检测结果作为所述待处理数据的检测结果。