[发明专利]一种文本处理方法、装置、计算机设备和存储介质在审
申请号: | 202110891307.5 | 申请日: | 2021-08-04 |
公开(公告)号: | CN114330357A | 公开(公告)日: | 2022-04-12 |
发明(设计)人: | 黄剑辉 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/289;G06K9/62;G06N3/04 |
代理公司: | 深圳翼盛智成知识产权事务所(普通合伙) 44300 | 代理人: | 李汉亮 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 处理 方法 装置 计算机 设备 存储 介质 | ||
本申请实施例公开了一种文本处理方法、装置、计算机设备和存储介质;本申请实施例可以获取文本内容,文本内容包括至少一个文本单元;对文本内容进行向量转换处理,得到文本内容对应的文本向量,以及对至少一个文本单元进行向量转换处理,得到每个文本单元对应的文本单元向量;将文本向量和文本单元向量进行语义融合,得到文本向量和文本单元向量之间的语义融合特征;将文本向量和文本单元向量进行信息量融合,得到文本向量和文本单元向量之间的信息量融合特征;根据语义融合特征和信息量融合特征,在至少一个文本单元中筛选并输出文本内容的目标文本单元,提高了对文本处理的准确率。
技术领域
本申请涉及计算机技术领域,具体涉及一种文本处理方法、装置、计算机设备和存储介质。
背景技术
随着计算机成本和计算能力的逐步提升以及半导体技术的发展,人工智能技术也得到了高速的发展。而随着人工智能技术的高速发展,使得文本处理方法也得到了快速的发展。
在现有技术中,通过采用人工智能模型实现对文本的处理。而采用人工智能模型实现对文本进行处理过程中的一个重要环节便是对文本对应的向量进行融合。发明人在对现有技术的实践中发现,现有技术中对向量进行融合的方式虽然效率高,但是准确率却不高,这将降低对文本处理的准确率。
发明内容
本申请实施例提出了一种文本处理方法、装置、计算机设备和存储介质,提高了文本处理的准确性。
本申请实施例提供了一种文本处理方法,包括:
获取文本内容,所述文本内容包括至少一个文本单元;
对所述文本内容进行向量转换处理,得到所述文本内容对应的文本向量,以及对所述至少一个文本单元进行向量转换处理,得到每个文本单元对应的文本单元向量;
将所述文本向量和所述文本单元向量进行语义融合,得到所述文本向量和所述文本单元向量之间的语义融合特征;
将所述文本向量和所述文本单元向量进行信息量融合,得到所述文本向量和所述文本单元向量之间的信息量融合特征;
根据所述语义融合特征和所述信息量融合特征,在所述至少一个文本单元中筛选并输出所述文本内容的目标文本单元。
相应的,本申请实施例还提供了一种文本处理装置,包括:
获取单元,用于获取文本内容,所述文本内容包括至少一个文本单元;
向量转换单元,用于对所述文本内容进行向量转换处理,得到所述文本内容对应的文本向量,以及对所述至少一个文本单元进行向量转换处理,得到每个文本单元对应的文本单元向量;
语义融合单元,用于将所述文本向量和所述文本单元向量进行语义融合,得到所述文本向量和所述文本单元向量之间的语义融合特征;
信息量融合单元,用于将所述文本向量和所述文本单元向量进行信息量融合,得到所述文本向量和所述文本单元向量之间的信息量融合特征;
筛选单元,用于根据所述语义融合特征和所述信息量融合特征,在所述至少一个文本单元中筛选并输出所述文本内容的目标文本单元。
在一实施例中,所述语义融合单元,包括:
识别子单元,用于分别对所述文本向量和所述文本单元向量进行识别,得到所述文本向量的向量属性和所述文本单元向量的向量属性;
构建子单元,用于基于所述文本向量的向量属性和所述文本单元向量的向量属性,构建语义融合张量;
语义融合子单元,用于利用所述语义融合张量将所述文本向量和所述文本单元向量进行语义融合,得到所述文本向量和所述文本单元向量之间的语义融合特征。
在一实施例中,所述语义融合子单元,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110891307.5/2.html,转载请声明来源钻瓜专利网。