[发明专利]一种新词发现方法、系统、终端及介质有效
| 申请号： | 202110206093.3 | 申请日： | 2021-02-22 |
| 公开（公告）号： | CN112966501B | 公开（公告）日： | 2023-04-11 |
| 发明（设计）人： | 崔东林;周润东 | 申请（专利权）人： | 广州寄锦教育科技有限公司 |
| 主分类号： | G06F40/284 | 分类号： | G06F40/284;G06F16/35;G06F40/216;G06F40/126;G06F40/242;G06N3/084;G06N3/045 |
| 代理公司： | 北京轻创知识产权代理有限公司 11212 | 代理人： | 赵秀斌 |
| 地址： | 510620 广东省广州市天河区天河东路*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供一种新词发现方法、系统、终端及介质，方法包括S1:使用Punctuation‑Entropy‑PMI算法垂直文本领域的文档集合进行预处理,获得第一阶段的候选词集合；S2:对所述第一阶段的候选词集合进行筛选，获得第一文档；S3:将所述第一文档进行预处理，并输入到BERT预训练模型进行文本增强，获得预测序列；S4:标记所述预测序列中的候选词；S5:根据标记的候选词、所述预测序列以及标记建立BERT分类模型；S6:输入文本序列以及待判断的候选词至所述BERT分类模型，获得预测标签，并根据设定的阈值判断所述待判断的候选词是否为新词。采用深度学习BERT预训练模型和无监督新词发现的方法，能有效提高新词发现的准确率。 | ||
| 搜索关键词： | 一种 新词 发现 方法 系统 终端 介质 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于广州寄锦教育科技有限公司，未经广州寄锦教育科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110206093.3/，转载请声明来源钻瓜专利网。
