[发明专利]DMP受众数据实时处理方法及装置、计算机可读存储介质

说明书

一种DMP受众数据实时处理方法及装置、计算机可读存储介质，所述DMP受众数据实时处理方法，包括：将实时获取到的受众数据输入至kafka容器；按照预设的配置条件对输入至所述kafka容器的受众数据进行识别，得到用户数据片段；其中，所述用户数据片段包括：用户标识、用户属性信息以及预设时间段内的用户行为信息；根据预设的知识库，对所述用户数据片段进行翻译，得到具有预设标签维度的用户数据片段；将所述具有预设标签维度的用户数据片段进行合并，得到处理后的实时用户数据片段。采用上述方案，能够提高DMP受众数据处理的实时性。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种DMP受众数据实时处理方法及装置、计算机可读存储介质。

背景技术

传统的数据管理平台(Date Management Platform，DMP)是把分散的第一、第三方数据进行整合纳入统一的技术平台，并对这些数据进行标准化和细分，让用户可以把这些细分结果推向现有的互动营销环境里。

然而，目前，DPM受众数据的处理通常是进行离线数据处理，数据处理的实时性较差。

发明内容

本发明实施例解决的技术问题是如何提高DMP受众数据处理的实时性。

为解决上述技术问题，本发明实施例提供一种DMP受众数据实时处理方法，包括：将实时获取到的受众数据输入至kafka容器；按照预设的配置条件对输入至所述kafka容器的受众数据进行识别，得到用户数据片段；其中，所述用户数据片段包括：用户标识、用户属性信息以及预设时间段内的用户行为信息；根据预设的知识库，对所述用户数据片段进行翻译，得到具有预设标签维度的用户数据片段；将所述具有预设标签维度的用户数据片段进行合并，得到处理后的实时用户数据片段。

可选的，在将实时获取到的受众数据输入至kafka容器之前，还包括：将所述受众数据的格式转换成kafka容器可以识别的数据格式。

可选的，所述将所述受众数据转换成预设数据格式，包括：将所述受众数据转换成schema格式。

可选的，在得到用户数据片段之后，还包括：将所述用户数据片段写入kafka容器的识别主体区域。

可选的，所述根据预设的知识库，对的所述用户数据片段进行翻译，包括：按照预设的拆分条件，将所述用户数据片段拆分为若干个子片段；从所述知识库中获取至少一个子片段对应的附属信息，所述附属信息与所述预设标签维度相对应；将所述若干个子片段以及所述至少一个子片段对应的附属信息进行合并，得到具有预设标签维度的用户数据片段。

可选的，在对所述用户数据片段进行翻译后，还包括：将所述用户行为信息转换成所述用户属性信息。

可选的，在得到处理后的实时用户数据片段之后，还包括：将所述实时用户数据片段存储于集群中。

可选的，在得到处理后的实时用户数据片段并存储于集群之后，还包括：当接收到用户的请求指令后，获取所述用户的实时画像；根据所述用户的实时画像，从所述集群中查询所述用户对应的实时用户数据片段。

本发明实施例还提供一种DMP受众数据实时处理装置，包括：获取单元，适于实时获取受众数据；输入单元，适于将实时获取到的受众数据输入至kafka容器；识别单元，适于按照预设的配置条件对输入至所述kafka容器的受众数据进行识别，得到用户数据片段；其中，所述用户数据片段包括：用户标识、用户属性信息以及预设时间段内的用户行为信息；翻译单元，适于根据预设的知识库，对所述用户数据片段进行翻译，得到具有预设标签维度的用户数据片段；合并单元，适于将所述具有预设标签维度的用户数据片段进行合并，得到处理后的实时用户数据片段。

可选的，所述DMP受众数据实时处理装置还包括：第一转换单元，适于在将实时获取到的受众数据输入至kafka容器之前，将所述受众数据的格式转换成kafka容器可以识别的数据格式。