[发明专利]一种基于大数据技术的自助数据标签平台及自助数据标签方法

权利要求书

1.一种基于大数据技术的自助数据标签平台，包括：

元数据定义单元，被配置为：通过元数据的定义将打标对象区分为属性数据、业务数据和行为数据，以及各个数据与打标对象之间的关系；

标签定义单元，被配置为：将数据进行标签定义，包括事实标签、模型标签和主观标签；其中，事实标签和模型标签是通过在界面上定义计算规则产生；

数据采集单元，被配置为：通过DataX对业务系统的数据进行采集，包括：对象的属性数据、行为数据、关联数据等，并导入Hive数据仓库中；

基础标签计算单元，被配置为：通过读取标签的配置规则，自动生产包括：SparkSQL、Spark RDD代码等计算逻辑，并提交到Hadoop的Yarn上进行执行，最终将计算结果写入到大数据非关系型数据库Hbase中；

组合标签计算单元，被配置为：通过计算好的基础标签，并且根据配置的计算规则，通过读取Hbase的数据及生产的计算逻辑代码实时计算出组合标签，并将计算好的组合标签写入到Hbase中；

对象分群计算单元，被配置为：通过预设的人群圈选规则，从Hbase中读取组合标签基础标签，根据配置自动生成计算代码实时计算出人群圈选的结果，并将结果写入到Hbase中。

2.根据权利要求1所述的基于大数据技术的自助数据标签平台，所述定义打标的对象包括用户、商品、店铺等。

3.根据权利要求1所述的基于大数据技术的自助数据标签平台，使用者通过用户终端在界面上定义计算规则，其中计算规则包括事实标签、模型标签、主观标签的源数据、数据筛选规则以及计算逻辑。

4.根据权利要求1所述的基于大数据技术的自助数据标签平台，所述事实标签为对象自有属性，模型标签包括用户行为数据和数据时间范围，主观标签为自由定义标签。

5.根据权利要求1所述的基于大数据技术的自助数据标签平台，所述用户终端包括但不限于手机、电脑、笔记本。

6.一种基于大数据技术的自助数据标签方法，包括：

元数据定义步骤，通过元数据的定义将打标对象区分为属性数据、业务数据和行为数据，以及各个数据与打标对象之间的关系；

标签定义步骤，将数据进行标签定义，包括事实标签、模型标签和主观标签；其中，事实标签和模型标签是通过在界面上定义计算规则产生；

数据采集步骤，通过DataX对业务系统的数据进行采集，包括：对象的属性数据、行为数据、关联数据等，并导入Hive数据仓库中；

基础标签计算步骤，通过读取标签的配置规则，自动生产包括：SparkSQL、Spark RDD代码等计算逻辑，并提交到Hadoop的Yarn上进行执行，最终将计算结果写入到大数据非关系型数据库Hbase中；

组合标签计算步骤，通过计算好的基础标签，并且根据配置的计算规则，通过读取Hbase的数据及生产的计算逻辑代码实时计算出组合标签，并将计算好的组合标签写入到Hbase中；

对象分群计算步骤，通过预设的人群圈选规则，从Hbase中读取组合标签基础标签，根据配置自动生成计算代码实时计算出人群圈选的结果，并将结果写入到Hbase中。

7.根据权利要求5所述的基于大数据技术的自助数据标签方法，所述定义打标的对象包括用户、商品、店铺等。

8.根据权利要求5所述的基于大数据技术的自助数据标签方法，使用者通过用户终端在界面上定义计算规则，其中计算规则包括事实标签、模型标签、主观标签的源数据、数据筛选规则以及计算逻辑。

9.根据权利要求5所述的基于大数据技术的自助数据标签方法，所述事实标签为对象自有属性，模型标签包括用户行为数据和数据时间范围，主观标签为自由定义标签。

10.根据权利要求5所述的基于大数据技术的自助数据标签方法，所述用户终端包括但不限于手机、电脑、笔记本。