[发明专利]数据集合的确定方法和装置有效
申请号: | 201710069739.1 | 申请日: | 2017-02-08 |
公开(公告)号: | CN106844718B | 公开(公告)日: | 2022-04-26 |
发明(设计)人: | 何彬彬 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/242;G06F16/2458 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 董文倩;褚敏 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 集合 确定 方法 装置 | ||
1.一种数据集合的确定方法,其特征在于,包括:
接收到用于指示从多个第一数据集合中获取目标数据集合的指令,其中,所述第一数据集合中包括按照目标类型采集到的至少一个实例数据,所述目标数据集合的数据用于进行数据分析;
根据第一属性集合确定每个所述第一数据集合中每个实例数据的目标概率,其中,所述目标概率为所述实例数据属于所述目标类型的概率,所述第一属性集合中包括用于指示为所述目标类型的数据的属性;
基于每个所述第一数据集合中所有实例数据的目标概率确定每个所述第一数据集合的采集质量信息,其中,所述采集质量信息用于指示按照所述目标类型采集到的所述第一数据集合属于所述目标类型的质量;
确定多个所述第一数据集合中采集质量信息满足预设质量要求的为用于进行数据分析的所述目标数据集合。
2.根据权利要求1所述的方法,其特征在于,根据第一属性集合确定每个所述第一数据集合中每个实例数据的目标概率包括:
获取每个所述实例数据的第二属性集合,其中,所述第二属性集合中包括所述实例数据所具有的属性信息;
基于所述第一属性集合和每个所述实例数据的所述第二属性集合确定每个所述实例数据的目标概率。
3.根据权利要求2所述的方法,其特征在于,所述第一属性集合的数量为至少一个,
在基于所述第一属性集合和每个所述实例数据的所述第二属性集合确定每个所述实例数据的目标概率之前,所述方法还包括:获取每个所述第一属性集合的置信度,其中,所述置信度用于指示具有所述第一属性集合中所有属性信息的数据属于所述目标类型的概率;
基于所述第一属性集合和每个所述实例数据的所述第二属性集合确定每个所述实例数据的目标概率包括:通过将所述实例数据的所述第二属性集合与每一个所述第一属性集合进行匹配,确定所述实例数据相对于每一个所述第一属性集合的目标匹配度;将与至少一个所述目标匹配度中的最大匹配度对应的所述第一属性集合的置信度作为所述实例数据的目标概率。
4.根据权利要求3所述的方法,其特征在于,通过将所述实例数据的所述第二属性集合与每一个所述第一属性集合进行匹配,确定所述实例数据相对于每一个所述第一属性集合的目标匹配度包括:
确定所述实例数据的第二属性集合中的属性信息与所述第一属性集合中的属性信息的第一匹配度;
确定所述第一属性集合中的属性信息与所述实例数据的第二属性集合中的属性信息的第二匹配度;
根据所述第一匹配度和所述第二匹配度确定所述实例数据相对于所述第一属性集合的所述目标匹配度。
5.根据权利要求4所述的方法,其特征在于,确定所述实例数据的第二属性集合中的属性信息与所述第一属性集合中的属性信息的第一匹配度包括:
确定所述第二属性集合中与所述第一属性集合中的属性信息匹配的目标属性信息的数量;
将所述目标属性信息的数量与所述第一属性集合中的属性信息的数量的比值作为所述第一匹配度。
6.根据权利要求1所述的方法,其特征在于,基于每个所述第一数据集合中所有实例数据的目标概率确定每个所述第一数据集合的采集质量信息包括以下至少之一:
确定所述第一数据集合中所有实例数据的目标概率的第一平均值,其中,所述第一平均值用于指示按照所述目标类型采集到的数据的准确度;
确定所述第一数据集合中所有实例数据的目标概率的熵值,其中,所述熵值用于指示按照所述目标类型采集到的数据的混杂度,所述采集质量信息包括所述第一平均值和/或所述熵值。
7.根据权利要求6所述的方法,其特征在于,确定所述第一数据集合中所有所述实例数据的目标概率的熵值包括:
通过对所述第一数据集合中的所有实例数据的目标概率进行取对数运算确定所述熵值。
8.根据权利要求6所述的方法,其特征在于,确定多个所述第一数据集合中采集质量信息满足预设质量要求的为用于进行数据分析的所述目标数据集合包括:
将多个所述第一数据集合中第一平均值达到第一预设值和/或熵值达到第二预设值的作为所述目标数据集合。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710069739.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置