[发明专利]基于卷积注意力的矩阵分解方法、装置及电子设备在审

专利信息
申请号: 201811454614.1 申请日: 2018-11-30
公开(公告)号: CN109754067A 公开(公告)日: 2019-05-14
发明(设计)人: 曾碧卿;商齐 申请(专利权)人: 华南师范大学
主分类号: G06N3/04 分类号: G06N3/04;G06N3/08;G06F17/16
代理公司: 广州骏思知识产权代理有限公司 44425 代理人: 吴静芝
地址: 528225 广东省佛山市*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 卷积 矩阵分解 注意力 隐含 装置及电子设备 神经网络 词向量 内积 误差反向传播 矩阵 概率矩阵 矩阵输入 评分矩阵 评分信息 使用概率 数据稀疏 文档表示 因子计算 用户描述 解释性 冷启动 预测 准确率 向量 算法 分解 优化
【说明书】:

发明涉及一种基于卷积注意力的矩阵分解方法、装置及电子设备。本发明所述的基于卷积注意力的矩阵分解方法包括如下步骤:将物品的用户描述文档表示为词向量矩阵;将所述词向量矩阵输入卷积注意力神经网络,获取物品的隐含因子;根据用户对物品的评分信息和物品的隐含因子,使用概率矩阵分解获取用户的隐含因子;对所述物品的隐含因子和所述用户的隐含因子计算向量的内积,并根据内积建立预测评分矩阵;使用误差反向传播算法,优化所述卷积注意力神经网络的参数和所述概率矩阵分解。本发明所述的基于卷积注意力的矩阵分解方法可解释性好,能有效减轻物品冷启动问题,并能改善数据稀疏问题,提高评分预测的准确率。

技术领域

本发明涉及数据处理技术领域,特别是涉及一种基于卷积注意力的矩阵分解方法、装置及电子设备。

背景技术

基于矩阵分解的推荐方法是目前一种常用的基本方法,通过分解给定用户对物品的评分矩阵,用两个低秩矩阵的乘积来逼近原来的评分矩阵,逼近的目标就是使预测的评分矩阵和原来的评分矩阵之间的误差平方最小。两个低秩矩阵分别为用户和物品的特征矩阵,矩阵中的这些特征向量可以简单地理解为用户对不同属性的偏好。与基于内容的过滤方法相比,矩阵分解具有较好的领域适应性,能够处理非结构化的数据,如音乐、视频等。但存在数据稀疏和冷启动问题。这是因为,纯粹的矩阵分解忽略了物品的评论文本和描述文本的隐含特征,使得矩阵分解的预测性能受限。

现有的评分预测将用户对物品的评分信息看作单纯的评分,没有从用户和物品的角度,深入思考用户对不同物品的评分和不同用户对同一物品的评分所蕴含的深层含义,简单的矩阵分解无法添加文本特征,不能深入理解用户对物品的评论文本,因此无法解决冷启动和推荐的可解释性问题。

卷积神经网络可用于提取文本的隐含特征,但是卷积神经网络往往忽略对单一词的特征提取,而且文本中不同词对评分预测的重要性不一,而大部分工作没有考虑不同词对评分预测的差异性。

发明内容

基于此,本发明的目的在于,提供一种基于卷积注意力的矩阵分解方法,其可解释性好,能有效减轻物品冷启动问题,并能改善数据稀疏问题,提高评分预测的准确率。

本发明基于卷积注意力的矩阵分解方法是通过如下方案实现的:

一种基于卷积注意力的矩阵分解方法,包括如下步骤:

将物品的用户描述文档表示为词向量矩阵;

将所述词向量矩阵输入卷积注意力神经网络,获取物品的隐含因子;

根据用户对物品的评分信息和物品的隐含因子,使用概率矩阵分解获取用户的隐含因子;

对所述物品的隐含因子和所述用户的隐含因子计算向量的内积,得到用户对物品的预测评分,并根据用户对物品的预测评分建立预测评分矩阵;

根据所述预测评分矩阵与真实评分矩阵之间的损失函数,使用误差反向传播算法,优化所述卷积注意力神经网络的参数和所述概率矩阵分解。

本发明所述的基于卷积注意力的矩阵分解方法,通过卷积注意力神经网络提取物品的隐含因子,根据用户对物品的评分信息和物品的隐含因子获取用户的隐含因子,对所述物品的隐含因子和所述用户的隐含因子计算向量的内积得到预测评分,并根据预测评分矩阵与真实评分矩阵之间的损失函数,使用反向传播算法减小误差,优化所述卷积注意力神经网络和所述概率矩阵分解,其可解释性好,能有效减轻物品冷启动问题,并能改善数据稀疏问题,提高评分预测的准确率。

在一种实施例中,将物品的用户描述文档表示为词向量矩阵前,还包括如下步骤:

去除所述用户描述文档中频率过高的词汇;

去除所述用户描述文档中频率过低的词汇。

通过对用户描述文档进行筛选,能更准确地获取用户描述文档的词向量矩阵。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南师范大学,未经华南师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811454614.1/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top