[发明专利]基于卷积神经网络的注意力权重计算方法和装置在审
申请号: | 201910962685.0 | 申请日: | 2019-10-11 |
公开(公告)号: | CN110909862A | 公开(公告)日: | 2020-03-24 |
发明(设计)人: | 陈曦;李薿;庄伯金;王少军 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06N3/04 | 分类号: | G06N3/04;G06N3/08 |
代理公司: | 北京鸿元知识产权代理有限公司 11327 | 代理人: | 张超艳;董永辉 |
地址: | 518033 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种基于卷积神经网络的注意力权重计算方法,该方法包括:接收时序数据,并使用自注意力机制计算时序数据中各特征的注意力权重;对时序数据进行多层注意力权重提取,并获得中间隐藏层影响因素;根据中间隐藏层影响因素和预先获取的基准数据计算不同时刻基准数据的注意力权重;对基准数据进行多层注意力权重提取,并使用自注意力机制更新中间隐藏层影响因素;根据最后一层的注意力权重和中间隐藏层影响因素获取并显示预测结果至客户端。其使用卷积操作提取注意力权重,可以从历史信息中获得信息;使用因果卷积的方式,可以避免未来时刻的信息泄露。本发明还通过修正卷积核的权重并采用多层提取方式,可以准确地获取注意力权重。 | ||
搜索关键词: | 基于 卷积 神经网络 注意力 权重 计算方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910962685.0/,转载请声明来源钻瓜专利网。