[发明专利]一种数据分发方法及推荐系统有效
申请号: | 201910736748.0 | 申请日: | 2019-08-10 |
公开(公告)号: | CN110457582B | 公开(公告)日: | 2023-03-21 |
发明(设计)人: | 张力;刘永才 | 申请(专利权)人: | 北京酷我科技有限公司 |
主分类号: | G06F16/9535 | 分类号: | G06F16/9535;G06F16/9536 |
代理公司: | 北京国标律师事务所 11753 | 代理人: | 姚克枫 |
地址: | 100080 北京市海淀区农大*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 分发 方法 推荐 系统 | ||
1.一种数据分发方法,其特征在于,包括:
调用启动脚本,所述启动脚本用于启动数据分发处理的初始化,
读取配置文件并进行解析,从中获取以下信息:文件名model_file、类名modle_class、策略类型modle_type,
缓存上述解析得到的文件名、类名、策略类型,以参数的形式传递给分发器架构,启动分发策略,将分发策略加载到系统中,
执行分发策略,具体包括:
步骤1,从redis缓存中读取数据,所述数据为架构层接收到的原始数据,
步骤2,解析读取到的原始数据,依次获取以下信息:
获取用户id,
获取设备id,
获取用户请求资源的个数,默认资源为多媒体资源,所述多媒体资源包括以下任意之一:视频资源,音频资源,
获取写历史标识的标记位,所述写历史标识的标记位用于根据用户请求偏好是否重复推送,
步骤3,判断用户id是否存在,
如果存在,则构建用户唯一标识user_id_key,所述用户唯一标识user_id_key格式如下:
ur:用户id,
如果不存在,则构建用户唯一标识user_id_key,所述用户唯一标识user_id_key格式如下:
dr:设备id
步骤4,将用户唯一标识user_id_key作为参数,查询对应的用户分数信息,
在推荐系统中,用户历史信息模块中存储有用户分数信息,通过将用户唯一标识user_id_key作为参数,发送到用户历史信息模块,可以获得对应的用户分数信息,
步骤5,基于用户分数信息,计算各种召回器召回个数,具体包括:
步骤5.1,设定用户分数阈值,
判断用户分数信息是否大于用户分数阈值,
如果大于,则设定为第一召回比例,
如果小于等于,则设定为第二召回比例,
步骤5.2,将用户请求资源的个数,与第一召回比例或第二召回比例相乘,得到各种召回器召回个数,
步骤6,将数据通过redis缓存发送到不同的召回器,所述不同的召回器至少包括:
个性化数据cf召回器,
冷数据cold召回器,
热门数据pop召回器。
2.如权利要求1所述的数据分发方法,其特征在于:所述启动脚本包括:
通过调用start函数开始分发模块的启动,
获取启动分发进程的个数,每个分发进程均执行如下步骤:
获取以参数的形式传递的文件名model_file、类名modle_class、策略类型modle_type,
将参数传递给分发器架构server_deliver.py,
调用record函数记录启动的进程号,以及记录启动的时间。
3.如权利要求1所述的数据分发方法,其特征在于:所述数据分发处理的初始化具体包括以下步骤:
将分发器加载到系统中,
连接热门数据推荐缓存队列pop redis,用于分发器向热门推荐pop发送数据,
连接个性化数据推荐缓存队列cf redis,用于分发器向个性化推荐cf发送数据,
连接冷门数据推荐缓存队列cold redis,用于分发器向冷门推荐cold发送数据,
连接其他数据推荐缓存队列other redis,用于分发器向其他推荐other发送数据,作为后补召回数据策略,
连接数据召回器缓存队列filter redis,用于向数据召回器filter发送通知,通知filter有数据需要从召回器召回,并对召回数据进行整合,
连接分发策略deliver接收请求数据的redis缓存。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京酷我科技有限公司,未经北京酷我科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910736748.0/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置