[发明专利]大型文档语料库中的令牌匹配在审
申请号: | 201980048857.1 | 申请日: | 2019-08-21 |
公开(公告)号: | CN112970024A | 公开(公告)日: | 2021-06-15 |
发明(设计)人: | G·雷博维茨 | 申请(专利权)人: | NETAPP股份有限公司 |
主分类号: | G06F40/242 | 分类号: | G06F40/242;G06F40/284;G06F17/18;G06F16/31;G06F16/33 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 酆迅 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 一种方法包括:接收包括多个实体的字典,其中每个实体具有在1个令牌与n个令牌之间的长度;构建包括n个布隆过滤器(BF)对的概率性数据表示模型,BF对从1到n被索引;利用所述实体的数据表示来自动填充所述概率性数据表示模型,其中,关于被索引为i的每个BF对:(i)利用具有至少i+1个令牌的所有所述实体的前i个令牌来填充第一BF,并且(ii)利用具有恰好i个令牌的所有所述实体来填充第二BF;接收文本语料库,其中文本语料库被分割成令牌;以及将所述文本语料库中的每个令牌与所填充的所述概率性数据表示模型自动匹配,其中所述匹配包括:以所述索引的顺序,循序地查询每个所述BF对,以确定匹配。 | ||
搜索关键词: | 大型 文档 语料库 中的 令牌 匹配 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于NETAPP股份有限公司,未经NETAPP股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201980048857.1/,转载请声明来源钻瓜专利网。
- 上一篇:用于治疗动物疼痛的大麻提取物
- 下一篇:生成气溶胶的基质