[发明专利]一种句子向量模型训练方法在审
| 申请号： | 202110766647.5 | 申请日： | 2021-07-07 |
| 公开（公告）号： | CN113553824A | 公开（公告）日： | 2021-10-26 |
| 发明（设计）人： | 姜怀臣;张毅阳;李冬冬 | 申请（专利权）人： | 临沂中科好孕智能技术有限公司 |
| 主分类号： | G06F40/194 | 分类号： | G06F40/194;G06F40/211;G06F40/284;G06F40/30;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 北京泛华伟业知识产权代理有限公司 11280 | 代理人： | 王勇 |
| 地址： | 276023 山东省临沂市*** | 国省代码： | 山东;37 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供一种句子向量模型训练方法，包括：S1、对多个原始句子进行数据增强处理，得到每个原始句子的多个相似句子，将所有句子复制多份后用于构建多个句子对及其相似性标签；S2、用BERT模型基于所述多个句子对进行预训练，得到第一BERT模型，其中，所述预训练包括利用句子对进行掩码语言模型预训练以及利用句子对和相似性标签进行的判断两个句子是否相似的预训练；S3、利用相应领域的任务对应的分类数据集对第一BERT模型进行微调，得到句子向量模型，该模型具有较好的泛化能力。基于句子向量模型采用的文本检索方法，提高文本检索效率。 | ||
| 搜索关键词： | 一种 句子 向量 模型 训练 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于临沂中科好孕智能技术有限公司，未经临沂中科好孕智能技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110766647.5/，转载请声明来源钻瓜专利网。
- 上一篇：多取代异苯并呋喃化合物及其用途
- 下一篇：感应式具有防夹手结构的铝合金门窗
