[发明专利]海量数据定向分类传输方法及系统有效
申请号: | 201711432769.0 | 申请日: | 2017-12-26 |
公开(公告)号: | CN108023895B | 公开(公告)日: | 2020-06-16 |
发明(设计)人: | 曹新朝;金风明;谭小野;马健;王建勋 | 申请(专利权)人: | 北京中船信息科技有限公司 |
主分类号: | H04L29/06 | 分类号: | H04L29/06;H04L29/08 |
代理公司: | 北京市盛峰律师事务所 11337 | 代理人: | 席小东 |
地址: | 100861 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 海量 数据 定向 分类 传输 方法 系统 | ||
1.一种海量数据定向分类传输方法,其特征在于,包括以下步骤:
步骤1,数据供给方客户端收集数据,并将收集到的数据传输给网络传输系统;
步骤2,网络传输系统以数据类型作为分类依据,将收集到的每个数据划分到对应的数据类型中;然后,将数据按照不同数据类型特征值化,得到每个数据的特征值;再按照数据类型,采用数据库分类储存数据以及数据的特征值;
步骤3,数据需求方客户端向网络传输系统发送获取数据的请求消息;
步骤4,网络传输系统根据所述数据需求方客户端的请求消息,生成需求信息;然后,对所述需求信息特征值化,得到需求信息特征值;然后,对所述需求信息特征值进行分析,并在所述数据库中进行分类匹配,计算需求信息与所述数据库中数据的特征匹配度;然后,筛选匹配度最高的供给方数据;
步骤5,网络传输系统根据步骤4筛选到的匹配度最高的供给方数据的数据类型,获得与供给方数据的数据类型对应的最佳传输机制;
步骤6,网络传输系统采用所述最佳传输机制,将步骤4筛选到的匹配度最高的供给方数据发送给所述数据需求方客户端;
步骤4中,计算需求信息与所述数据库中数据的特征匹配度;然后,筛选匹配度最高的供给方数据,具体为:
网络传输系统的匹配度计算模块建立海量数据多层次语义匹配模型,多层次语义匹配模型包括从高层向低层排列的基本信息匹配,功能信息匹配、约束信息匹配和综合匹配;首先,计算需求信息与所述数据库中各数据的基本信息匹配度,并将基本信息匹配度与基本信息匹配度设定阈值进行比较,筛选出大于基本信息匹配度设定阈值的第一数据库数据集;然后,计算需求信息与筛选出的第一数据库数据集中数据的功能信息匹配度,并将功能信息匹配度与功能信息匹配度设定阈值进行比较,从第一数据库数据集中筛选出大于功能信息匹配度设定阈值的第二数据库数据集;然后,计算需求信息与筛选出的第二数据库数据集中数据的约束信息匹配度,并将约束信息匹配度与约束信息匹配度设定阈值进行比较,从第二数据库数据集中筛选出大于约束信息匹配度设定阈值的第三数据库数据集;然后,计算需求信息与筛选出的第三数据库数据集中数据的综合匹配度,并将综合匹配度与综合匹配度设定阈值进行比较,从第三数据库数据集中筛选出大于综合匹配度设定阈值的第四数据库数据集;
由此经过四次匹配过滤后,得到的第四数据库数据集为最优数据匹配结果集;在第四数据库数据集中,再进一步筛选出匹配度最高的供给方数据。
2.根据权利要求1所述的海量数据定向分类传输方法,其特征在于,步骤1具体为:
数据供给方客户端对云端资源进行智能的感知、识别和信息的采集,并通过数据信息处理中心,实现感知信息和标识信息的预分析、聚合及预处理;具体的,首先采用射频识别技术和传感技术,通过读取设备对云端资源的静态属性、动态属性进行感知,从而获取采集数据;所述采集数据包括资源的静态标识信息;然后,通过传感网络将各种采集数据传输到本地数据中心;本地数据中心对所述采集数据进行数据处理,并将处理后的采集数据通过网络实时的接入到云网中,为网络传输系统进行数据定向分类传输提供基础。
3.根据权利要求1所述的海量数据定向分类传输方法,其特征在于,步骤2具体为:
网络传输系统首先按照数据类型,对数据进行分类,对不同类型的数据的文件类型进行分析归纳;
然后,根据支持资源描述的语义特征,构建描述各数据类型的本体文档,该本体文档包括各数据类型的描述方式和语言表达方式;
在得到数据类型的本体文档后,分类储存数据。
4.根据权利要求1所述的海量数据定向分类传输方法,其特征在于,步骤4,网络传输系统根据所述数据需求方客户端的请求消息,生成需求信息,具体为:
数据需求方提出请求,网络传输系统的需求生成模块在本部动作中对数据需求方所提出的请求进行修正提示或自发修正,将数据需求方的需求形成完全符合系统规则的表单;在需求生成模块的干预下,非符合规则的需求表单将被修正为对应系统规则的需求表单,而无法满足修正要求的表单将被发回数据需求方重新修改,直至能够满足需求表单修正需求,为下一步匹配度计算做准备。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中船信息科技有限公司,未经北京中船信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711432769.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:猪胰脏残渣制备鱼饲料的方法
- 下一篇:一种通过电磁悬浮减震的牙种植装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置