[发明专利]一种数据融合方法及装置有效
申请号: | 201710145976.1 | 申请日: | 2017-03-13 |
公开(公告)号: | CN108572947B | 公开(公告)日: | 2019-11-19 |
发明(设计)人: | 甘骏;苏可;饶孟良 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06F16/2458 |
代理公司: | 44285 深圳市深佳知识产权代理事务所(普通合伙) | 代理人: | 王仲凯<国际申请>=<国际公布>=<进入 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 第一数据 数据融合 语义相似度 相似度 预设 属性确定 融合 保证 | ||
1.一种数据融合方法,其特征在于,所述方法包括:
提取第一数据和第二数据中的属性,其中,所述第一数据和所述第二数据中包括属性与属性值的对应关系;
计算所述第一数据中的属性与所述第二数据中的属性之间的语义相似度值;
确定大于预设第一阈值的语义相似度值,并将每个所述语义相似度值对应的属性确定为所述第一数据和所述第二数据的一对共有属性;
通过比较每对共有属性对应的属性值之间的相似度,确定所述第一数据和所述第二数据之间的相似度值;
如果所述第一数据和所述第二数据之间的相似度值大于预设第二阈值,则将所述第一数据和所述第二数据进行融合。
2.根据权利要求1所述的数据融合方法,其特征在于,所述通过比较每对共有属性对应的属性值之间的相似度,确定所述第一数据和所述第二数据之间的相似度值,包括:
从所述第一数据和所述第二数据中,获取每对共有属性对应的属性值,并计算同一对共有属性对应的属性值之间的语义相似度值;
根据每对共有属性对应的属性值之间的语义相似度值,确定所述第一数据和所述第二数据之间的相似度值。
3.根据权利要求2所述的数据融合方法,其特征在于,所述方法还包括:
在所述第一数据和所述第二数据中,计算每对共有属性对应的权重值。
4.根据权利要求3所述的数据融合方法,其特征在于,所述根据每对共有属性对应的属性值之间的语义相似度值,确定所述第一数据和所述第二数据之间的相似度值,包括:
将每对共有属性对应的属性值之间的语义相似度值与该对共有属性对应的权重值的乘积进行累加,得到所述第一数据和所述第二数据之间的相似度值。
5.根据权利要求2所述的数据融合方法,其特征在于,所述根据每对共有属性对应的属性值之间的语义相似度值,确定所述第一数据和所述第二数据之间的相似度值之前,还包括:
从所述共有属性中,筛除所述语义相似度值不大于预设第三阈值的属性值对应的共有属性。
6.根据权利要求1所述的数据融合方法,其特征在于,所述计算所述第一数据中的属性与所述第二数据中的属性之间的语义相似度值之前,还包括:
提取所述第一数据和所述第二数据中各个属性对应的属性值,并获取相似度值大于预设第四阈值的属性值对应的属性。
7.根据权利要求6所述的数据融合方法,其特征在于,所述计算所述第一数据中的属性与所述第二数据中的属性之间的语义相似度值,包括:
计算所述相似度值大于预设第四阈值的属性值对应的所述第一数据中的属性与所述第二数据中的属性之间的语义相似度值。
8.根据权利要求1所述的数据融合方法,其特征在于,所述计算所述第一数据中的属性与所述第二数据中的属性之间的语义相似度值之前,还包括:
通过查询预设的同义词库,将属于同义词的属性确定为所述第一数据和所述第二数据的一对共有属性。
9.根据权利要求8所述的数据融合方法,其特征在于,所述计算所述第一数据中的属性与所述第二数据中的属性之间的语义相似度值,包括:
计算所述第一数据中的属性与所述第二数据中的属性中不属于同义词的属性之间的语义相似度值。
10.根据权利要求1所述的数据融合方法,其特征在于,所述计算所述第一数据中的属性与所述第二数据中的属性之间的语义相似度值,包括:
利用预设的词嵌入模型分别获取所述第一数据中的属性与所述第二数据中的属性对应的语义向量;
计算所述第一数据中的属性与所述第二数据中的属性对应的语义向量之间的语义相似度值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710145976.1/1.html,转载请声明来源钻瓜专利网。