[发明专利]数据并发处理方法、装置及系统、计算机设备及可读介质有效
申请号: | 201910394225.2 | 申请日: | 2019-05-13 |
公开(公告)号: | CN110231983B | 公开(公告)日: | 2022-01-28 |
发明(设计)人: | 杨松;刘涛 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48 |
代理公司: | 北京鸿德海业知识产权代理有限公司 11412 | 代理人: | 田宏宾 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 并发 处理 方法 装置 系统 计算机 设备 可读 介质 | ||
本发明提供一种数据并发处理方法、装置及系统、计算机设备及可读介质。其方法包括:设置待传输的目标事件对应的原子类型的参数,初始化为0;建立数据队列,存放目标事件包括的N个数据的相关信息,各数据的相关信息中携带原子类型参数的地址信息,由多个数据发送装置根据数据队列中N个数据的相关信息,并行向远端服务器发送对应的N个数据,各数据发送装置发送完一个数据后根据原子类型参数的地址信息对原子类型参数累加1;监控原子类型参数的数值是否等于N;若等于,确定目标事件中的所有数据发送完成。本发明的技术方案,能够有效地提高数据的并发处理效率,缩短数据传输的时长,满足实时性要求比较高的场景的需求。
【技术领域】
本发明涉及计算机应用技术领域,尤其涉及一种数据并发处理方法、装置及系统、计算机设备及可读介质。
【背景技术】
数据并发处理与发送技术是指通过并发的方式,把多份数据进行处理,然后在把处理完的数据发送给其他服务的技术。
在现有的互联网技术中,有些数据需要经过一些步骤进行处理,然后再发送给其他服务。这类数据还有一个特点是,接收端只有接收到全部的被处理的数据,才可以组成一个有意义的数据单元供自己使用。例如一个包含图片名列表的json数据包,只把这个数据包发送给对方是没有什么用处的,因为对方得到的只是图片名列表。在这种情况下,只有把图片名对应的图片经过简单的处理之后先传给对方,然后再把这个json文件传给对方,对方才可以真正的组织出有意义的数据。现有技术中,最传统的做法是:把json中图片名列表对应的图片依次经过处理之后,和json一块儿打包发送给对方。这种方式在一个进程或者线程中,顺序处理所有任务。且现有的这种技术方案逻辑简单,实现起来比较容易。
但是上述技术方案实现时,需要将全部的任务都放一个进程或者线程中顺序处理,数据的传输时间会较长,无法满足实时性要求比较高的场景的需求。
【发明内容】
本发明提供了一种数据并发处理方法、装置及系统、计算机设备及可读介质,用于缩短数据传输的时长,满足实时性要求比较高的场景的需求。
本发明提供一种数据并发处理方法,所述方法包括:
设置待传输的目标事件对应的原子类型的参数,并初始化为0;
建立数据队列,所述数据队列用于存放所述目标事件中包括的N个数据的相关信息,各所述数据的相关信息中携带有所述原子类型的参数的地址信息,以由多个数据发送装置根据所述数据队列中所述N个数据的相关信息,并行向远端服务器发送对应的所述N个数据,且每个所述数据发送装置发送完一个所述数据后,根据所述原子类型的参数的地址信息对所述原子类型的参数累加1;
监控所述原子类型的参数的数值是否等于N;
若等于,确定所述目标事件中的所有数据发送完成。
本发明还提供一种数据并发处理方法,所述方法包括:
从待传输的目标事件的数据队列中获取数据的相关信息;所述数据队列为所述数据管理装置为所述目标事件建立的,用于存放所述目标事件中包括的N 个所述数据的相关信息,各所述数据的相关信息中携带有原子类型的参数的地址信息;所述原子类型的参数为所述数据管理装置为所述目标事件设置的,并初始化为0;
根据所述数据的相关信息,获取对应的数据;
向远端服务器发送获取的所述数据;
根据所述原子类型的参数的地址信息,对原子类型的参数累加1。
本发明提供一种数据管理装置,所述装置包括:
设置模块,用于设置待传输的目标事件对应的原子类型的参数,并初始化为0;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910394225.2/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置