[发明专利]一种句对匹配方法、装置和用于匹配句对的装置在审
申请号: | 202110730117.5 | 申请日: | 2021-06-29 |
公开(公告)号: | CN113343647A | 公开(公告)日: | 2021-09-03 |
发明(设计)人: | 杨正彪;许静芳;鲁涛;戴磊;李质轩;殷明明;王青龙 | 申请(专利权)人: | 北京搜狗科技发展有限公司 |
主分类号: | G06F40/154 | 分类号: | G06F40/154;G06F40/157;G06F40/242;G06F40/279;G06F40/58 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 苏培华 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 匹配 方法 装置 用于 | ||
本申请实施例公开了一种句对匹配方法、装置和用于匹配句对的装置。该方法的实施例包括:从网页库内的网页中抽取包含目标语言语句的句段,以得到句段集;其中,句段集中的每个句段包括目标语言的语句以及语句的上下文;将双语数据集中的双语句对与句段集中的句段进行匹配;双语句对中包括源语言的第一语句和对应目标语言的第二语句;对于双语数据集中的每一个双语句对,确定句段集中与双语句对相匹配的句段,将网页库中与所确定的句段对应的网页确定为该双语句对的来源网页;其中,与双语句对相匹配的句段为同时包含双语句对中的第一语句与第二语句的句段。该实施方式提高了句对匹配效率。
技术领域
本申请实施例涉及计算机技术领域,具体涉及一种句对匹配方法、装置和用于匹配句对的装置。
背景技术
随着计算机技术的发展,具备翻译功能的客户端应用越来越多。这类客户端应用可存储大量双语句对,供用户查询。根据用户需求,双语例句需要注明有效的网页来源信息,因此,针对需要上线的双语句对,需要查询来源网页。
现有技术中,对于某一待上线的双语句对,通常需要从包含海量网页的网页库中检索该双语句对中的两个语句,从而确定其来源网页。由于网页库以及双语句对的数据规模较大,这种方式通常耗时较大,以致双语句对的匹配效率较低。
发明内容
本申请实施例提出了一种句对匹配方法、装置和用于匹配句对的装置,以解决现有技术中双语句对的匹配效率较低的技术问题。
第一方面,本申请实施例提供了一种句对匹配方法,该方法包括:从网页库内的网页中抽取包含目标语言语句的句段,以得到句段集;其中,所述句段集中的每个句段包括目标语言的语句以及所述语句的上下文;将双语数据集中的双语句对与所述句段集中的句段进行匹配;所述双语句对中包括源语言的第一语句和对应目标语言的第二语句;对于所述双语数据集中的每一个双语句对,确定所述句段集中与所述双语句对相匹配的句段,将所述网页库中与所确定的句段对应的网页确定为该双语句对的来源网页;其中,所述与所述双语句对相匹配的句段为同时包含所述双语句对中的第一语句与第二语句的句段。
优选地,所述将双语数据集中的双语句对与所述句段集中的句段进行匹配,包括:
遍历所述句段集中的每个句段,从所述句段包括的目标语言的语句中提取目标语言片段,得到目标语言片段集;
将所述双语数据集中双语句对包括的第二语句与所述目标语言片段集中的目标语言片段进行匹配,以确定所述目标语言片段集中与第二语句一致的目标片段;
确定所述双语数据集中与所述目标片段一致的第二语句所属的目标双语句对,若所述目标双语句对包括的第一语句位于所述目标片段所属的句段中,则确定所述目标双语句对与所述目标片段所属的句段相匹配。
优选地,所述将双语数据集中的双语句对与所述句段集中的句段进行匹配,包括:
遍历所述句段集中的每个句段,从所述句段包括的上下文中提取源语言片段,得到源语言片段集;
将所述双语数据集中双语句对包括的第一语句与所述源语言片段集中的源语言片段进行匹配,以确定所述源语言片段集中与第一语句一致的目标片段;
确定所述双语数据集中与所述目标片段一致的第一语句所属的目标双语句对,若所述目标双语句对包括的第二语句位于所述目标片段所属的句段中,则确定所述目标双语句对与目标片段所属的句段相匹配。
优选地,所述将所述双语数据集中双语句对包括的第一语句与所述源语言片段集中的源语言片段进行匹配,包括:
基于所述双语数据集中双语句对包括的第一语句,建立字典树;
基于所述字典树,将所述双语数据集中双语句对包括的第一语句与所述源语言片段集中的源语言片段进行匹配。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司,未经北京搜狗科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110730117.5/2.html,转载请声明来源钻瓜专利网。