[发明专利]一种数据分类方法、装置、设备及存储介质在审
申请号: | 202110316417.9 | 申请日: | 2021-03-24 |
公开(公告)号: | CN112801221A | 公开(公告)日: | 2021-05-14 |
发明(设计)人: | 吕根鹏;庄伯金;刘玉宇 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/04;G06N3/08;G06F16/2455 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 熊永强 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 分类 方法 装置 设备 存储 介质 | ||
本发明实施例涉及人工智能领域,公开了一种数据分类方法、装置、设备及存储介质,该方法包括:提取第一训练样本数据集中每个模态的第一任务数据的第一任务特征;提取第二训练样本数据集中每个第二任务数据的第二任务特征,确定每个第二任务数据的模态;根据与每个第二任务数据的模态对应的第一修改分支的第一权重调整分类特征提取器的第二权重,并确定目标分类特征提取器;将待查询任务数据输入目标分类特征提取器确定待查询任务数据的模态类别,实现了使用一个神经网络模型对多个模态的任务数据进行分类,提高了对各个模态的任务数据进行分类的性能和准确性。本发明涉及区块链技术,如可将任务数据写入区块链中,以用于数据取证等场景。
技术领域
本发明涉及数据处理领域,尤其涉及一种数据分类方法、装置、设备及存储介质。
背景技术
在解决少样本分类任务时,神经网络学习是目前比较流行的方法,基于神经网络学习的方法,使模型可以从少量训练样本里面学会分类。目前的分类研究中,假设模型遇到的新任务都是单模态的,比如训练任务的类别都是来自于鸟这个大类,需要分的是鸟的子类,比如区分哪些是麻雀、哪些是燕子、哪些是鹦鹉等,举个例子,在模型训练阶段,有大量的训练任务,教会模型如何根据少量的样本就可以区分麻雀和鹦鹉、鸽子和老鹰,在遇到新的任务的时候,模型只要少量的样本就可以学会分别新任务的鸟类,这里的所有类别都是属于鸟类的,所以新任务是单模态的。
然而现实中,任务可能不是要区分单一模态的类别,可能是要区分多个模态的类别,例如,可能是要根据少量样本区分麻雀和鹦鹉,也有可能要区分金毛和拉布拉多,也有可能要区分牡丹花和玫瑰花等等。如果直接将区分狗类的分类任务和区分鸟类的分类任务不加区分地共同训练一个神经网络模型,神经网络模型的分类效果并不理想,如果要区分的模态的数目变多,效果会更差。因此,如何使用一个神经网络模型对多个模态的任务进行分类,同时要保证对各个模态任务的分类性能是非常重要的。
发明内容
本发明实施例提供了一种数据分类方法、装置、设备及存储介质,可以实现使用一个神经网络模型对多个模态的任务数据进行分类,并提高了对各个模态的任务数据进行分类的性能和准确性。
第一方面,本发明实施例提供了一种数据分类方法,所述方法包括:
获取第一训练样本数据集,所述第一训练样本数据集中包括多个模态的第一任务数据;
利用预训练得到的任务特征提取器从所述多个模态的第一任务数据中提取与每个模态的第一任务数据对应的第一任务特征,并基于预设的聚类算法对提取的第一任务特征进行聚类,以及根据聚类结果确定所述每个模态的聚类中心;
获取第二训练样本数据集,所述第二训练样本数据集中包括多个第二任务数据,并利用所述任务特征提取器提取每个第二任务数据对应的第二任务特征,以及根据所述每个第二任务特征和所述每个模态的聚类中心确定所述每个第二任务数据的模态;
根据预设的模态与分支的对应关系,确定与所述每个第二任务数据的模态对应的第一修改分支,并根据每个第一修改分支的第一权重调整预设的分类特征提取器的第二权重,以及基于调整后的第二权重对所述预设的分类特征提取器进行训练,得到目标分类特征提取器;
将所述第二训练样本数据集中每个模态中的各个第二任务数据分别输入所述目标分类特征提取器,得到所述每个模态对应的类别特征;
获取待查询数据集,所述待查询数据集中包括一个或多个待查询任务数据,并将每个待查询任务数据输入所述目标分类特征提取器,得到所述每个待查询任务数据的类别特征,以及根据所述每个待查询任务数据的类别特征与所述每个模态对应的类别特征确定所述每个待查询任务数据的模态类别。
进一步地,所述利用预训练得到的任务特征提取器从所述多个模态的第一任务数据中提取与每个模态的第一任务数据对应的第一任务特征之前,还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110316417.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置