[发明专利]一种词语分析方法及装置在审
申请号: | 201610286546.7 | 申请日: | 2016-05-03 |
公开(公告)号: | CN107341496A | 公开(公告)日: | 2017-11-10 |
发明(设计)人: | 白瑞峰;郑继川;董滨;姜珊珊 | 申请(专利权)人: | 株式会社理光 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06F17/27 |
代理公司: | 北京银龙知识产权代理有限公司11243 | 代理人: | 许静,黄灿 |
地址: | 日本*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 词语 分析 方法 装置 | ||
技术领域
本发明涉及信息处理技术,尤其涉及一种词语分析方法及装置。
背景技术
随着互联网和社交媒体的迅速发展,互联网和社交媒体上每天都会有很多的新词出现。所谓新词指的是还未被收集到现有的词典中的词语。其中,有些新词被用来表达网络用户对某一事物的观点和态度,在此将其称为新的情感词。无论是已有的情感词还是新的情感词都是具有极性的。根据表达的情感不同,情感词可分为表达正面情感的情感词和表达负面情感的情感词。
现有技术中提供了一种词语分析方法。在该方法中,主要是利用了候选词和种子情感词之间的相似性来判断该候选词是否是情感词。但是,在实际应用中,即使是相同的情感词在不同的上下文中也可能表示不同的情感。因此,仅通过两个词之间相似性分析而获得的对候选词的分析结果是不准确的。
发明内容
有鉴于此,本发明提供一种词语分析方法及装置,能够提高词语分析结果的准确性。
为解决上述技术问题,本发明提供一种词语分析方法,包括:
获取训练好的支持向量机分类器;其中,所述训练好的支持向量机分类器是利用种子情感词对应的第一词向量和种子非情感词对应的第二词向量训练得到的;所述第一词向量通过对所述种子情感词所在句子进行分析获得,所述第二词向量通过对所述种子非情感词所在句子进行分析获得;且所述种子情感词和种子非情感词都存在于现有词典中;
获取新的待识别情感词,并通过对所述新的待识别情感词所在句子进行分析获得所述新的待识别情感词对应的第三词向量;
利用所述训练好的支持向量机分类器和所述第三词向量确定所述新的待识别情感词的极性。
其中,所述获取训练好的支持向量机分类器,包括:
获取所述种子情感词,并通过对所述种子情感词所在句子进行分析获得所述种子情感词对应的第一词向量;
获取所述种子非情感词,并通过对所述种子非情感词所在句子进行分析获得所述种子非情感词对应的第二词向量;
利用所述第一词向量、所述第二词向量训练支持向量机分类器,获取所述训练好的支持向量机分类器。
其中,所述获取所述种子情感词,并通过对所述种子情感词所在句子进行分析获得所述种子情感词对应的第一词向量,包括:
对第一预设文档进行分析,获取所述第一预设文档中的情感词,并从所述情感词中选择种子情感词;
获取所述种子情感词所在句子,并获取所述种子情感词所在句子的依存句法结构;
根据所述依存句法结构,选择与所述种子情感词的距离符合第一预设距离条件且与所述种子情感词具有直接依存关系的第一候选词语;
根据所述第一候选词语和所述种子情感词获得所述第一词向量。
其中,所述获取所述种子非情感词,并通过对所述种子非情感词所在句子进行分析获得所述种子非情感词对应的第二词向量,包括:
对第一预设文档进行分析,获取所述第一预设文档中的非情感词,并从所述非情感词中选择种子非情感词;
获取所述种子非情感词所在句子,并获取所述种子非情感词所在句子的依存句法结构;
根据所述依存句法结构,选择与所述种子非情感词的距离符合第二预设距离条件且与所述种子非情感词具有直接依存关系的第二候选词语;
根据所述第二候选词语和所述种子非情感词获得所述第二词向量。
其中,所述获取新的待识别情感词,并通过对所述新的待识别情感词所在句子进行分析获得所述新的待识别情感词对应的第三词向量,包括:
对第二预设文档进行分析,获取所述第二预设文档中的新词,其中所述新词未存在于所述现有词典中;
从所述新词中获取新的待识别情感词以及所述新的待识别情感词所在句子;
获取所述新的待识别情感词所在句子的依存句法结构,并根据所述依存句法结构选择与所述新的待识别情感词的距离符合第三预设距离条件且与所述新的待识别情感词具有直接依存关系的第三候选词语;
根据所述第三候选词语和所述新的待识别情感词获得所述第三词向量。
其中,所述利用所述训练好的支持向量机分类器和所述第三词向量确定所述新的待识别情感词的极性,包括:
将所述第三词向量输入到所述训练好的支持向量机分类器;
根据所述训练好的支持向量机分类器的输出确定所述新的待识别情感词的极性。
第二方面,本发明提供一种词语分析装置,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于株式会社理光,未经株式会社理光许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610286546.7/2.html,转载请声明来源钻瓜专利网。