[发明专利]数据流通、分析方法及装置、存储介质、终端有效
申请号: | 201910330823.3 | 申请日: | 2019-04-23 |
公开(公告)号: | CN110187981B | 公开(公告)日: | 2021-09-24 |
发明(设计)人: | 汤奇峰;张驰 | 申请(专利权)人: | 上海数据交易中心有限公司 |
主分类号: | G06F9/54 | 分类号: | G06F9/54 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 张振军;吴敏 |
地址: | 200436 上海市静*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 流通 分析 方法 装置 存储 介质 终端 | ||
1.一种数据流通方法,其特征在于,包括:
接收来自数据供方的至少一个源文件,每一源文件包括文件标识以及文件内容,所述文件内容包括多条需方请求值以及供方返回值;
至少根据每一源文件的文件标识、文件内容与多个预设标签字段的匹配关系重组形成多条消息,每条消息包括所述多个预设标签字段,所述多个预设标签字段具备字段值,所述多个预设标签字段包括数据字段,所述数据字段的字段值为单条需方请求值以及单条供方返回值;
将所述多条消息按照形成时间依次传入至消息队列,并传输至数据分析系统,以供所述数据分析系统对所述多条消息进行数据分析。
2.根据权利要求1所述的数据流通方法,其特征在于,所述至少根据每一源文件的文件标识、文件内容与多个预设标签字段的匹配关系重组形成多条消息包括:
遍历所述至少一个源文件,迭代地至少根据所述匹配关系从所述文件标识以及所述文件内容中抽取所述多个预设标签字段的字段值,并将抽取到的字段值按照预设顺序进行排列,以形成单条消息,直至遍历完成所述至少一个源文件。
3.根据权利要求1所述的数据流通方法,其特征在于,所述文件标识包括批次号;所述多个预设标签字段包括批次号字段和传输状态字段,所述至少根据每一源文件的文件标识、文件内容与多个预设标签字段的匹配关系重组形成多条消息包括:
确定所述文件标识中的批次号为当前消息的批次号字段的字段值;
判断所述当前消息的批次号字段的字段值与上一消息的批次号字段的字段值是否相同;
如果所述当前消息的批次号字段的字段值与上一消息的批次号字段的字段值不同,则确定所述传输状态字段的字段值为开始传输。
4.根据权利要求3所述的数据流通方法,其特征在于,所述文件标识还包括同一批次的文件数量,所述方法还包括:
根据所述同一批次的文件数量以及每一源文件中的数据量统计同一批次的总数据量,并统计同一批次的当前消息总量;
如果所述当前消息的批次号字段的字段值与上一消息的批次号字段的字段值相同,并且所述当前消息总量未达到所述同一批次的总数据量,则确定所述传输状态字段的字段值为传输中;
或者,如果所述当前消息的批次号字段的字段值与上一消息的批次号字段的字段值相同,并且所述当前消息总量达到所述同一批次的总数据量,则确定所述传输状态字段的字段值为传输结束。
5.根据权利要求3所述的数据流通方法,其特征在于,所述多个预设标签字段包括自增序号字段;所述至少根据每一源文件的文件标识、文件内容与多个预设标签字段的匹配关系重组形成多条消息包括:
如果当前消息的批次号字段的字段值与上一消息的批次号字段的字段值不同,则确定所述当前消息的自增序号字段的字段值为初始值;
或者,如果所述当前消息的批次号字段的字段值与上一消息的批次号字段的字段值相同,则确定所述当前消息的自增序号字段的字段值为上一消息的自增序号字段的字段值加一。
6.根据权利要求1至5任一项所述的数据流通方法,其特征在于,所述多个预设标签字段还包括时间字段、数据查询状态字段、数据需方标识字段、数据供方标识字段和配送任务标识字段。
7.基于权利要求1所述的数据流通方法的数据分析方法,其特征在于,包括:
从所述消息队列中按照多条消息的形成时间接收所述多条消息;
对所述多条消息进行数据分析。
8.根据权利要求7所述的数据分析方法,其特征在于,所述多个预设标签字段包括传输状态字段,所述传输状态字段的字段值选自开始传输、传输中和传输结束,所述对所述多条消息进行数据分析包括:
确定传输状态字段的字段值为开始传输的初始消息;
在消息的传输状态字段的字段值为传输结束时,对从接收所述初始消息的时刻开始接收到的所有消息进行数据分析。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海数据交易中心有限公司,未经上海数据交易中心有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910330823.3/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置