[发明专利]基于大数据内容智能营销系统

权利要求书

1.一种基于大数据内容智能营销系统，其特征在于，包括计算引擎，所述计算引擎的营销计算包括以下步骤：

步骤一：所述计算引擎包括基础中间件；

步骤二：Flink提供了Exactly-Once一致性语义，并且具有非常完善的多种窗口机制，引入了Event Time与WaterMark，提供丰富状态的状态访问；

步骤三：实时计算的能力其实可以把它总结成一个数据通道的能力，实时计算可能不会完全满足我们的实时分析的需求，可以通过Flink引擎做数据处理与预计算，最终都会落到一个对应存储分析引擎，整合多个应用平台的底层自有数据资产，或实时采集的日志、行为数据等；

步骤四：在Flink的metrics基础上，根据业务场景自定义数据处理实际延迟时间、数据解析失败量、外部服务调用耗时等指标；所有的指标通过自定义的Reporter上报到Kafka，再通过一个实时的ETL，把指标结构化后输出到ES和Druid里，避免出现数据丢失或延迟产生，进行实时告警和预处理；

步骤五：在这些底层基础之上，首要是实时任务的管理管控，包括平台上所有Flink或者Spark任务，进行资源的调优，对实时数据流中的数据的元数据化；

步骤六：搭建中间件关联多个数据源进行实时数据混算，提供跨源T+0查询，完成报表数据计算引擎，弥补报表工具本身计算能力不足，开放的计算能力分布在涉及计算的各个阶段。

2.根据权利要求1所述的一种基于大数据内容智能营销系统，其特征在于：所述计算引擎可对有限数据流和无限数据流进行有状态计算，可部署在各种集群环境，对各种大小的数据规模进行快速计算，可同时进行批处理、交互式计算、流式计算。

3.根据权利要求1所述的一种基于大数据内容智能营销系统，其特征在于：在所述计算引擎之上的应用包括指标分析、实时特征、安全风控、ETL、实时推荐。

4.根据权利要求1所述的一种基于大数据内容智能营销系统，其特征在于：所述基础中间件包括路由与web服务器、RPC框架、消息中间件、缓存服务、配置中心、分布式事务、任务调度和数据库层，所述路由与web服务器用于处理和转发其他服务器通信数据的服务器，所述RPC框架为微服务时代的远程服务调用框架；所述消息中间件支持在分布式系统之间发送和接收消息的软件，所述缓存服务用于分布式的高速数据存储层，一般是内存存储，所述配置中心为用来统一管理各个项目中所有配置的系统，所述分布式事务包括事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上，用于数据库扩展性，所述任务调度为分布式环境下提供定时、任务编排、分布式跑批等功能的系统；所述数据库层用于支持弹性扩容和分库分表的TDDL，数据库连接池Driud，Binlog同步的Canal。