[发明专利]语义词典构建方法和装置有效
申请号: | 201410521385.6 | 申请日: | 2014-09-30 |
公开(公告)号: | CN104281565B | 公开(公告)日: | 2017-09-05 |
发明(设计)人: | 曾增烽;李朋凯;林英展;何径舟;石磊 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 北京品源专利代理有限公司11332 | 代理人: | 路凯,胡彬 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语义 词典 构建 方法 装置 | ||
1.一种语义词典构建方法,其特征在于,包括:
从用户的网络日志中提取具有相同或者相近语义的句子;其中,从用户的网络日志中提取具有相同或者相近语义的句子包括:根据用户点击日志获取用户查询过程中所使用的检索句以及所点击的网页的标题,并将所述检索句及所述网页的标题作为具有相同或者相近语义的句子;或者,根据用户会话日志获取用户一次查询会话中所使用的至少两个检索句,将所述至少两个检索句作为具有相同或者相近语义的句子;
根据所述具有相同或者相近语义的句子中的词的语义,对所述具有相同或者相近语义的句子中的词进行对齐,从而获取具有相同或者相近语义的备选词;
根据所述备选词在所述具有相同或者相近语义的句子中的语境信息,对所述备选词进行聚类,以获取具有相同语义的词,并将具有相同语义的词添加到语义词典中。
2.根据权利要求1所述的方法,其特征在于,根据用户点击日志获取用户查询过程中所使用的检索句以及所点击的网页的标题,并将所述检索句及所述网页的标题作为具有相同或者相近语义的句子包括:
根据用户点击日志计算用户使用相同检索句检索后,点击相同网页链接的次数;
若所述次数超过次数阈值,则将所述检索句及所述网页链接的网页标题作为具有相同或者相近语义的句子。
3.根据权利要求1所述的方法,其特征在于,根据用户会话日志获取用户一次查询会话中所使用的至少两个检索句,将所述至少两个检索句作为具有相同或者相近语义的句子包括:
根据用户会话日志获取用户一次查询会话中至少两个检索句依次出现的次数;
若所述至少两个检索句依次出现的次数大于次数阈值,则将所述至少两个检索句作为具有相同或者相近语义的句子。
4.根据权利要求1所述的方法,其特征在于,根据所述具有相同或者相近语义的句子中的词的语义对所述具有相同或者相近语义的句子中的词进行对齐,从而获取具有相同或者相近语义的备选词包括:
对所述具有相同或者相近语义的句子中的词进行文本匹配,将完全匹配的词进行文本对齐;
根据预置的词匹配模板对所述具有相同或者相近语义的句子中的词进行文本对齐;和/或
根据对其他具有相同或者相近语义的句子的对齐结果的统计,将已有的对齐结果中对齐概率较高的词进行文本对齐。
5.根据权利要求1所述的方法,其特征在于,根据所述备选词在所述具有相同或者相近语义的句子中的语境信息对所述备选词进行聚类,以获取具有相同语义的词包括:
根据所述备选词在所述具有相同或者相近语义的句子中的上下文对所述备选词进行聚类,将聚类后同类的备选词作为具有相同语义的词。
6.一种语义词典构建装置,其特征在于,包括:
语句筛选模块,用于从用户的网络日志中提取具有相同或者相近语义的句子;
词语筛选模块,用于根据所述具有相同或者相近语义的句子中的词的语义,对所述具有相同或者相近语义的句子中的词进行对齐,从而获取具有相同或者相近语义的备选词;
词语聚类模块,用于根据所述备选词在所述具有相同或者相近语义的句子中的语境信息,对所述备选词进行聚类,以获取具有相同语义的词,并将具有相同语义的词添加到语义词典中;
其中,所述语句筛选模块包括:
第一语句筛选单元,用于根据用户点击日志获取用户查询过程中所使用的检索句以及所点击的网页的标题,并将所述检索句及所述网页的标题作为具有相同或者相近语义的句子;或者
第二语句筛选单元,用于根据用户会话日志获取用户一次查询会话中所使用的至少两个检索句,将所述至少两个检索句作为具有相同或者相近语义的句子。
7.根据权利要求6所述的装置,其特征在于,所述第一语句筛选单元具体用于:
根据用户点击日志计算用户使用相同检索句检索后,点击相同网页链接的次数;
若所述次数超过次数阈值,则将所述检索句及所述网页链接的网页标题作为具有相同或者相近语义的句子。
8.根据权利要求6所述的装置,其特征在于,所述第二语句筛选单元具体用于:
根据用户会话日志获取用户一次查询会话中至少两个检索句依次出现的次数;
若所述至少两个检索句依次出现的次数大于次数阈值,则将所述至少两个检索句作为具有相同或者相近语义的句子。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410521385.6/1.html,转载请声明来源钻瓜专利网。