[发明专利]基于流式数据的自动化层级探索方法和装置

摘要

本发明涉及数据探索方法领域，具体涉及基于流式数据的自动化层级探索方法和装置，该方法基于流式计算框架，包括：创建物品候选集、从物品候选集中获取样本生成新物品候选集、将新物品候选集中的样本推送给终端用户、通过流式计算框架采集终端用户行为数据、通过用户行为数据触发新物品候选集更新；新物品候选集包括若干不同层级，较高层级新物品候选集的样本来自前一较低层级新物品候选集。本发明通过对线上实时流式数据进行处理，监控新物品候选集的曝光次数来自动触发候选集的更新，解决定时更新导致的曝光不均的问题；设置若干不同层级的新物品候选集，解决了新物品不同曝光次数下置信度相同的问题。