[发明专利]搜索效果的监控方法和装置

说明书

本发明提供一种搜索效果的监控方法和装置。该方法包括：从搜索记录中获取监控周期内的N个搜索结果，其中，N大于或等于1；根据所述N个搜索结果，确定所述N个搜索结果对应的N个评价指标NDCG；根据所述N个评价指标NDCG，确定所述监控周期内的搜索得分。实现了搜索效果的自动化监控。

技术领域

本发明人涉及互联网搜索技术，尤其涉及一种搜索效果的监控方法和装置。

背景技术

网络搜索是指利用搜索引擎对互联网上的信息进行搜索。具体过程为，用户在搜索栏输入关键词并点击检索后，搜索引擎便会从索引数据库中找到匹配该关键词的网页，进而将网页展示给用户。对用户来说，输入关键词后，如果展示给用户的网页是按照与关键词的相关性从大到小依次排列的，那么用户从排在前面的几个网页的内容便可获得最有效的信息，用户搜索体验会提高；对于搜索引擎来说，将与关键词相关性较高的排在前面，被用户看到的概率是比较大，可以提高用户点击打开网页数量，从而增加收益。可见，对线上搜索效果进行实时监控，并根据监控结果及时地对搜索算法进行改进有重要的意义。

目前，现有技术还无法实现对搜索效果的监控。

发明内容

本发明提供一种搜索效果的监控方法和装置，用以解决搜索效果无法监控的难题。

第一方面，本发明提供一种搜索效果的监控方法，包括：

从搜索记录中获取监控周期内的N个搜索结果，其中，N大于或等于1；

根据所述N个搜索结果，确定所述N个搜索结果对应的N个评价指标NDCG；

根据所述N个评价指标NDCG，确定所述监控周期内的搜索得分。

可选的，所述根据所述N个搜索结果，确定所述N个搜索结果对应的N个评价指标NDCG，包括：

获取所述N个搜索结果对应的N个基准数据，所述N个搜索结果和所述N个基准数据一一对应；

根据所述N个搜索结果和所述N个基准数据，确定所述N个搜索结果对应的N个评价指标NDCG。

可选的，所述获取所述N个搜索结果对应的N个基准数据，包括：

通过点击模型获取所述N个搜索结果对应的N个基准数据。

可选的，所述根据所述N个搜索结果和所述N个基准数据，确定所述N个搜索结果对应的N个评价指标NDCG，包括：

根据每个搜索结果，获取每个搜索结果对应的评价得分；

根据每个基准数据，获取每个搜索结果对应的理想评价得分；

根据所述评价得分和所述理想评价得分，确定每个搜索结果对应的评价指标NDCG。

可选的，所述根据每个搜索结果，获取每个搜索结果对应的评价得分，包括：

根据如下公式确定每个搜索结果对应的评价得分；

其中，DCG_p表示第一搜索结果对应的评价得分，所述第一搜索结果为所述N个搜索结果中的任一搜索结果，p为从第一搜索结果包含的所有文档中选择排在前面的文档的数量，rel_i表示p个文档中第i个文档的相关等级。

可选的，所述根据每个基准数据，获取每个搜索结果对应的理想评价得分，包括：

根据如下公式确定每个搜索结果对应的理想评价得分：