[发明专利]一种文本语义表达方法及装置有效
申请号: | 201810942947.2 | 申请日: | 2018-08-17 |
公开(公告)号: | CN109062902B | 公开(公告)日: | 2022-12-06 |
发明(设计)人: | 华磊;刘权;陈志刚 | 申请(专利权)人: | 科大讯飞股份有限公司 |
主分类号: | G06F40/35 | 分类号: | G06F40/35 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 张小娜;王宝筠 |
地址: | 230088 安徽*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 语义 表达 方法 装置 | ||
本申请公开了一种文本语义表达方法及装置,该方法包括:在获取到待表达的目标文本后,目标文本进行分词处理,以得到各个目标词语,然后对目标文本进行依存句法分析,以确定各个目标词语之间的依存关系,接着,可以根据各个目标词语之间的依存关系,对目标文本进行语义表达。可见,本申请实施例在获取到待表达的目标文本后,不再采用常见的one‑hot方式对目标文本进行语义表达,而是根据目标文本中各个目标词语之间的依存关系,对该目标文本进行语义表达,即,在对目标文本进行语义表达时考虑了文本中词语之间的语义关系,从而提高语义表达结果的准确性。
技术领域
本申请涉及自然语言处理技术领域,尤其涉及一种文本语义表达方法及装置。
背景技术
文本可以指句子或篇章,文本的语义表达是指将自然语言形式的文本,编码成一个特定的向量,使得这个向量包含该文本的语义信息。一个好的语义表达结果将有助于提升文本相似性检索、情感分类、领域分类等各类任务的效果和性能。
现有的语义表达方式通常采用one-hot的方式,也就是用0、1来表示一个文本中的词语是否存在,具体来讲,可以预先创建一个包括大量词语的词表,以文本A为例,可以将词表中属于文本A的词语用1表示,而词表中不属于文本A的词语用0表示,从而形成一个由0和1组成的文本向量来表达文本A的语义信息,且使该文本向量的维度与词表中的词语个数相同。
但是,现有的这种采用one-hot方式对文本进行语义表达的方式,并不考虑文本中词语之间的语义关系,导致语义表达结果不准确。
发明内容
本申请实施例的主要目的在于提供一种文本语义的表达方法及装置,能够提高语义表达结果的准确性。
本申请实施例提供了一种文本语义表达方法,包括:
获取待表达的目标文本;
将所述目标文本进行分词处理,得到各个目标词语;
对所述目标文本进行依存句法分析,确定各个目标词语之间的依存关系;
根据各个目标词语之间的依存关系,对所述目标文本进行语义表达。
可选的,所述确定各个目标词语之间的依存关系,包括:
确定与所述目标词语具有依存关系的支配词语,得到由所述目标词语和所述支配词语组成的词语对,其中,所述支配词语是根节点标识或不同于所述目标词语的另一目标词语,所述根节点标识是依存句法树的根节点的标识,所述依存句法树描述了各个目标词语之间的依存关系;
对于各个目标词语分别对应的词语对,确定所述词语对中的两个词语之间的依存关系。
可选的,所述根据各个目标词语之间的依存关系,对所述目标文本进行语义表达,包括:
对于每一词语对,确定所述词语对中每一词语对应的词向量以及所述词语对中两个词语之间的依存关系对应的关系向量;
利用每一词语对对应的两个词向量以及关系向量进行编码,得到所述目标文本的文本编码向量,其中,所述文本编码向量表达了所述目标文本的句法信息和词语序列信息;
采用所述文本编码向量,表达所述目标文本的语义信息。
可选的,所述根据各个目标词语之间的依存关系,对所述目标文本进行语义表达,包括:
根据各个目标词语之间的依存关系以及每条依存路径,对所述目标文本进行语义表达,其中,所述每条依存路径是依存句法树中的每条子路径,所述依存句法树描述了各个目标词语之间的依存关系,所述子路径的终点为所述依存句法树的叶子节点。
可选的,所述根据各个目标词语之间的依存关系以及每条依存路径,对所述目标文本进行语义表达,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于科大讯飞股份有限公司,未经科大讯飞股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810942947.2/2.html,转载请声明来源钻瓜专利网。