[发明专利]一种基于半监督迁移学习的文本分类方法有效
申请号: | 202110914634.8 | 申请日: | 2021-08-10 |
公开(公告)号: | CN113807171B | 公开(公告)日: | 2023-09-29 |
发明(设计)人: | 余肖生;张合欢;沈胜 | 申请(专利权)人: | 三峡大学 |
主分类号: | G06F18/241 | 分类号: | G06F18/241;G06F18/214;G06N3/0895;G06N3/096 |
代理公司: | 武汉高得专利代理事务所(普通合伙) 42268 | 代理人: | 杨如增 |
地址: | 443002 湖*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于半监督迁移学习的文本分类方法,包括以下步骤:(1)数据集和数据预处理,获取少量标记数据集和大量未标记数据集,进行清洗和去噪操作,然后通过word2vec方法将数据集样本向量化,向量维度选取100;(2)数据增强,对未标记数据中的每个样本进行K次文本增强,增强方式为反译方式;(3)伪标签预判,将标记样本输入到预训练模型Bert中,采用微调的方法进行模型迁移;(4)样本混合;(5)文本分类,经过训练后得到的最好模型,可用来对测试集中的数据进行文本分类预测。该基于半监督迁移学习的文本分类方法结合半监督学习、迁移学习用于解决在文本分类领域中标注数据难以获取的问题,同时能够提高文本分类模型的性能。 | ||
搜索关键词: | 一种 基于 监督 迁移 学习 文本 分类 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于三峡大学,未经三峡大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110914634.8/,转载请声明来源钻瓜专利网。