[发明专利]基于推荐机制的数据处理规则的快速配置方法

说明书

本发明涉及数据处理技术领域，具体涉及一种基于推荐机制的数据处理规则的快速配置方法。该基于推荐机制的数据处理规则的快速配置方法包括以下步骤：步骤1：规则管理模块生成推荐规则，推荐规则存储在推荐规则库中；步骤2：数据处理模块接收待处理数据信息，探查后将待处理数据与标准数据元映射；步骤3：映射后的待处理数据与标准数据元匹配相应推荐规则；步骤4：将匹配后的推荐规则反馈至系统页面，提供一种能够快速添加配置处理规则的方法。

技术领域

本发明涉及数据处理技术领域，具体涉及一种基于推荐机制的数据处理规则的快速配置方法。

背景技术

目前，随着海量数据的接入要求越来越高，数据种类越来越多，对数据提供快速的接入能力成为了现实问题，在面临几百上千份数据的快速接入要求情况下，对数据实行快速的接入配置成为评价系统接入能力的一个重要方面。

当前的数据处理通常分为数据处理规则配置和数据处理规则执行两大步。数据处理规则定义在分析数据的基础上将数据处理的规则进行配置定义，数据处理规则执行则由数据处理引擎根据配置的规则按顺序执行并输出相应的处理结果。

当前的数据处理规则配置通常通过编辑sql语句的形式为etl系统进行规则设置，在提供图形化编辑功能的系统中通常也是通过人工一步步配置处理规则的方式。在这种方式下配置效率较低，且经常会发生漏配规则的情况。

发明内容

本发明要解决的技术问题是：克服现有技术的不足，提供一种能够快速匹配添加配置处理规则的基于推荐机制的数据处理规则的快速配置方法。

本发明为解决其技术问题所采用的技术方案为：基于推荐机制的数据处理规则的快速配置方法，包括数据元管理、推荐规则管理模块、规则推荐模块、数据处理模块，所述数据元管理模块用于管理数据元信息，所述推荐规则管理模块用于存储和管理推荐规则，所述数据处理模块用于根据数据处理规则处理待处理数据，所述规则推荐模块用于根据待处理数据推荐具体的数据处理规则，经确认后提供给数据处理模块使用；

包括以下步骤：

步骤1：规则管理模块进行数据处理规则配置生成推荐规则，推荐规则存储在推荐规则库中；

步骤2：数据处理模块接收待处理数据信息，探查后将待处理数据与标准数据元映射；

步骤3：映射后的待处理数据与标准数据元匹配相应推荐规则；

步骤4：将匹配后的推荐规则反馈至系统页面，从而配置人员可以将推荐规则作为配置规则快速勾选添加到数据处理定义的处理规则中。

步骤1中数据处理规则配置将标准数据元和功能定义结合设置，针对功能定义中的每一项输入、输出数据和标准数据元进行绑定，形成一个个的推荐规则。推荐规则可定义多组数据。

步骤2中标准数据元包括数据格式的定义，根据待处理数据的数据项名称、数据内容值进行探测，基于值域等规则匹配，找到与其对应的标准数据元，并将待处理数据的数据项和标准数据元形成映射关系。一个数据项可以形成多个可能的标准数据元。

步骤3中规则管理模块找出与映射后的数据项与标准数据元相关的推荐规则进行匹配。

规则管理模块维护推荐规则的参数及与标准数据元的对应关系，将数据的数据项与标准数据元与推荐规则相对比，选择相关的推荐规则进行匹配，将推荐规则中的功能定义与数据的数据项结合作为匹配后的推荐规则内容。

步骤4中将匹配的推荐规则列入到推荐列表中，反馈到图形化的流程配置页面上。配置人员可以将推荐规则添加到配置画布上，同时对于手动配置的规则，可以将其加入到推荐规则库中，后续再遇到类似的数据系统可以自动推荐出规则。

与现有技术相比，本发明具有以下有益效果：