[发明专利]在线实时用户画像生成方法

权利要求书

1.在线实时用户画像生成方法，其特征在于，包括以下步骤：

（1）对用户日志流数据化，形成流数据；

（2）对流数据进行处理；

（3）画像的热存储。

2.根据权利要求1所述的在线实时用户画像生成方法，其特征在于，

所述的步骤（1）具体为：把收集的用户行为日志直接存入消息队列，即把原始的用户行为日志流数据化，包括以下步骤：

a、实时读取日志文件产生的新数据；

b、将日志文件解析，将每一条日志转化成包含所有预设字段的键值对；c、把键值对序列化成json格式，存入消息队列。

3.根据权利要求1所述的在线实时用户画像生成方法，其特征在于，

所述的步骤（2）具体为：使用流计算模式，处理流程如下：

1）日志数据校验，排除不包含有效行为的垃圾数据；有效行为包括点击，订阅和收藏；

2）行为数据校验，检测行为日志的附带属性，排除不包含有效属性的日志；

3）对历史画像提取并反序列化，从存储的消息队列中提取当前用户的历史画像，并将历史画像作为加载对象；具体为：

a、从画像库中读取用户的历史画像数据；

b、用读出的画像信息实例画一个新的画像对象；

4）新行为日志更新；

5）更新后的画像序列化入库。

4.根据权利要求1所述的在线实时用户画像生成方法，其特征在于，所述的步骤（3）具体为：采用了画像数据热存储的方式，即放入缓存，把画像数据同时备份的缓存中供计算使用。

5.根据权利要求2所述的在线实时用户画像生成方法，其特征在于，

所述的新行为日志更新具体包括：

a.根据历史画像的产生时间计算到此时的衰减系数，衰减系数计算方法如下：衰减系数=（当前时间-画像产生的时间）／半衰期，半衰期为180天；并对历史画像的属性值与衰减系数相乘进行衰减形成历史数据；

b.过滤掉已经衰减至0.0125的属性值；

c.根据日志时间与当前时间对需要更新的属性值进行衰减；方法同步骤a；

d.更新的属性值叠加到a步骤处理的历史数据上，产出此时的新画像。