[发明专利]旅游评论短文本分类方法、装置、电子设备及存储介质在审
申请号: | 202111675055.9 | 申请日: | 2021-12-31 |
公开(公告)号: | CN114328932A | 公开(公告)日: | 2022-04-12 |
发明(设计)人: | 冼广铭;梅灏洋;余嘉琳;张鑫;王鲁栋 | 申请(专利权)人: | 华南师范大学 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F40/126;G06F40/30;G06N3/04;G06N3/08 |
代理公司: | 广州骏思知识产权代理有限公司 44425 | 代理人: | 张金龙 |
地址: | 528225 广东省佛山市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 旅游 评论 文本 分类 方法 装置 电子设备 存储 介质 | ||
1.一种旅游评论短文本分类方法,其特征在于,包括以下步骤:
获取待分类的文本,并对所述待分类的文本进行预处理,得到数字化的文本数据;
采用BERT模型对所述文本数据进行编码,得到编码向量;
采用BTM主题模型对所述文本数据进行主题向量学习,得到主题向量;
将所述编码向量和所述主题向量进行融合,得到融合向量;
提取所述融合向量的深层特征,得到上下文语义关系编码序列;
对所述上下文语义关系编码序列进行归一化处理,得到所述文本的所属类别。
2.根据权利要求1所述的一种旅游评论短文本分类方法,其特征在于,采用BTM主题模型对所述文本数据进行主题向量学习,得到主题向量,包括:
将所述文本数据S输入BTM模型;
将文本数据S转化为Biterm,得到B=(B1,B2,...,Bm),其中Bi表示文本数据经过BTM模型分解的每一个Biterm;
生成每个Bi的主题分布,得到W=(W1,W2,...,Wm),其中,其中W为主题向量集,Wi表示每一个Bi所对应的主题向量。
3.根据权利要求1所述的一种旅游评论短文本分类方法,其特征在于,采用BERT模型对所述文本数据进行编码,得到编码向量,包括:
将所述文本数据S输入所述BERT模型;
将所述文本数据S=(S1,S2,...,Sn)进行序列化,得到序列化的文本数据E=(E1,E2,...,En),其中Ei表示文本中第i个字的序列化表示;
用BERT编码器对所述序列化的文本数据进行训练,得到编码向量T=(T1,T2,...,Tn),其中,T为经过BERT编码后的向量集,Ti向表示每一个Ei对应的词编码向量。
4.根据权利要求1所述的一种旅游评论短文本分类方法,其特征在于,提取所述融合向量的深层特征,包括:
将所述融合向量输入训练好的BiGRU网络;
所述BiGRU网络对所述融合向量进行处理,提取所述融合向量的深层特征,得到上下文语义关系编码序列。
5.根据权利要求1所述的一种旅游评论短文本分类方法,其特征在于,对所述上下文语义关系编码序列进行归一化处理,得到所述文本的所属类别,包括:
将所述上下文语义关系编码序列输入全连接层进行处理;
使用softmax函数对所述全连接层的输出结果进行归一化处理,输出所述文本对应的分类概率;
根据所述文本对应的分类概率,得到所述文本的所属类别。
6.根据权利要求1所述的一种旅游评论短文本分类方法,其特征在于,将所述编码向量和所述主题向量进行融合,得到融合向量,包括:
使用以下公式,拼接所述编码向量和所述主题向量:
X=[T;W]
其中,“;”表示向量的顺序拼接操作;
得到所述融合向量X=(X1,X2,...,Xt)。
7.根据权利要求1所述的一种旅游评论短文本分类方法,其特征在于,对所述待分类的文本进行预处理,包括:
使用分词工具,将所述待分类的文本切分成短语或者单词;
对所述切分后的文本,进行去除停止词处理;
对所述切分后的文本,进行去除低频词语处理;
输出所述待分类的文本对应的数字化的文本数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南师范大学,未经华南师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111675055.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于平流层环境模拟的电机系统
- 下一篇:高精图像的单目相机采集方法及装置