[发明专利]一种基于用户日志的数据处理系统

摘要

本发明公开了一种基于用户日志的数据处理系统，其包括收集用户日志端和数据处理端，所述收集用户日志端实时收集用户端的操作日志，并将收集的用户日志传输至所述数据处理端，上述数据处理端包括选择模块，标记模块，预算模块，匹配模块，提取模块，分类模块，第一处理模块，查询模块，第二处理模块，暂存模块。本发明的预算模块能够提前预算结果，再通过匹配模块进行匹配，如果匹配成功则将匹配结果直接推送至用户，提前预算提高了推送的效率，如果没有提前预算到结果，则进行计算。

主权项

一种基于用户日志的数据处理系统，其包括收集用户日志端和数据处理端，所述收集用户日志端实时收集用户端的操作日志，并将收集的用户日志传输至所述数据处理端，其特征在于，所述数据处理端包括：选择模块，所述选择模块对实时收集的用户日志进行选择，获得有效的用户日志，建立第一数据集；标记模块，所述标记模块对所述第一数据集中的用户日志进行标记，标记后的用户日志建立第二数据集；预算模块，所述预算模块在所述第二数据集中进行实时预算，建立动态预算数据集；匹配模块，所述匹配模块将用户的查询字段与所述动态预算数据集中的数据进行匹配，匹配成功的数据将作为查询结果推送给用户；提取模块，所述提取模块从所述第二数据集中提取与用户查询字段具有相似度的用户日志数据，构建第三数据集；分类模块，所述分类模块对所述第三数据集中的用户日志数据进行分类，将相同或相似的查询字段作为查询串，或者标记符号聚类相同的用户日志进行分类，或者查询频率时间相同的用户日志进行分类，所述分类模块构建第四数据集；第一处理模块，所述第一处理模块根据查询规则建立线性回归模型，将与查询字段匹配的用户日志放入线性回归模型中，得到处理后的复合模型，计算出每一个查询字段的关联度；查询模块，所述查询模块在所述第四数据集中查询到与用户输入的查询字段相匹配的用户日志作为查询集，构建第五数据集；第二处理模块，所述第二处理模块在所述第五数据集中，根据所述第一数据处理模块得到的关联度进行排序处理，最后确定N个结果作为查询结果，推送给用户。