[发明专利]基于强化学习的网页页面主动式检索系统

摘要

本发明公开了一种基于强化学习的网页页面(Web)主动式检索系统，该系统包括：Web搜索Agent模块，用于完成基于用户主要兴趣主题的搜索、Web页面内容分析和Web页面下载功能；Web过滤Agent模块，用于完成对页面进行内容分析，页面过滤和分类索引；Web接口Agent模块，用于向用户推荐学习之后的最能代表用户兴趣的网页、接收用户的反馈和记录用户浏览行为及做出统计分析等功能；用户信息学习Agent模块，用于实现基于强化学习的兴趣更新，不断对用户的信息进行更新，完成实现代表用户兴趣的最佳模型。本发明提供的基于强化学习的Web主动式检索系统具有自适应能力强，准确度高，使用方便的特点。

主权项

一种基于强化学习的网页页面主动式检索系统，其特征在于，该系统包括：Web搜索Agent模块，用于接收用户的初始请求，并且将用户请求进行分析，利用相关主题分析下载Web页面，将结果提交至Web过滤Agent模块；Web过滤Agent模块，用于实现对信息搜索Agent搜索获取的页面进行内容分析，利用强化学习中的Q学习系统对各个Web页面进行Q学习中值函数计算，并将结果提供Web接口Agent模块；Web接口Agent模块用于提供用户推荐Web页面，记录用户浏览行为，并将结果提交给用户信息学习Agent模块；用户信息学习Agent模块，用于利用强化学习中的TD学习算法对用户的兴趣模型进行更新和改进，根据Web接口Agent模块所完成的对用户浏览页面行为的记录，生成获取到的用户的反馈值，由兴趣度计算和更新模块不断对用户的兴趣进行更新，利用TD学习算法对用户的兴趣模式进行计算，最终达到用户信息模型的最佳权重分布。