[发明专利]一种数据处理系统、方法、电子设备及存储介质在审
申请号: | 202010339111.0 | 申请日: | 2020-04-26 |
公开(公告)号: | CN111552566A | 公开(公告)日: | 2020-08-18 |
发明(设计)人: | 马元文 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 项京;高莺然 |
地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理系统 方法 电子设备 存储 介质 | ||
1.一种数据处理系统,其特征在于,包括:主控模块、数据采集模块和数据处理模块;
所述主控模块,用于监测原始数据的处理结果,当所述处理结果为异常处理结果时,获取目标旧原始数据的标识信息,并向所述数据采集模块发送所述目标旧原始数据的标识信息;所述目标旧原始数据为:所述异常处理结果对应的旧原始数据;
所述数据采集模块,用于采集并保存新原始数据,以及基于所述目标旧原始数据的标识信息,获取目标旧原始数据,并向所述数据处理模块发送所述目标旧原始数据对应的数据流和所述新原始数据对应的数据流;所述新原始数据为未经数据处理的原始数据,所述旧原始数据为所述处理结果对应的原始数据;
所述数据处理模块,用于对接收的目标旧原始数据对应的数据流和新原始数据对应的数据流分别进行数据处理,获取目标旧原始数据的处理结果和新原始数据的处理结果,并用目标旧原始数据的处理结果更新所述异常处理结果。
2.根据权利要求1所述的系统,其特征在于,所述主控模块,包括:监测子模块和控制子模块;
所述监测子模块,用于监测原始数据的处理结果,当所述监测结果表示所述原始数据的处理结果为异常处理结果时,获取目标旧原始数据的标识信息;并将所得到的目标旧原始数据的标识信息发送至所述控制子模块;
所述控制子模块,接收所述目标旧原始数据的标识信息,并向所述数据采集模块发送所述目标旧原始数据的标识信息。
3.根据权利要求1所述的系统,其特征在于,还包括:数据接收模块;所述数据处理模块,包括:新数据处理子模块和旧数据处理子模块;
所述数据采集模块,具体用于采集并保存新原始数据,以及基于所述目标旧原始数据的标识信息,从已保存的原始数据中获取目标旧原始数据,并为所述目标旧原始数据生成旧数据标签;并向所述数据处理模块发送:已生成旧数据标签的目标旧原始数据对应的数据流和所述新原始数据对应的数据流;
所述数据接收模块,用于基于所接收的数据流中的数据是否具有所述旧数据标签,将数据流中的数据分别发送至所述新数据处理子模块和所述旧数据处理子模块,其中,所述目标旧原始数据对应的数据流被发送至所述旧数据处理子模块,所述新原始数据对应的数据流被发送至所述新数据处理子模块;
所述旧数据处理子模块,用于对接收的数据流中的所述目标旧原始数据进行数据处理,得到目标旧原始数据的处理结果,并用目标旧原始数据的处理结果更新所述异常处理结果;
所述新数据处理子模块,用于对接收的数据流中的所述新原始数据进行数据处理,得到新原始数据的处理结果。
4.根据权利要求3所述的系统,其特征在于,还包括:数据处理结果存储模块;
所述旧数据处理子模块,具体用于对接收的数据流中的所述目标旧原始数据进行数据处理,得到目标旧原始数据的处理结果,并用目标旧原始数据的处理结果更新所述异常处理结果,并将更新后的处理结果存储至所述数据处理结果存储模块;
所述新数据处理子模块,具体用于对接收的数据流中的所述新原始数据进行数据处理,得到新原始数据的处理结果,并将新原始数据的处理结果保存至所述数据处理结果存储模块。
5.根据权利要求1所述的系统,其特征在于,所述目标旧原始数据的标识信息为时间戳,所述时间戳表示所述目标旧原始数据生成的时刻。
6.根据权利要求1所述的系统,其特征在于,所述目标旧原始数据的标识信息为故障时间段;
所述主控模块,具体用于监测原始数据的处理结果,获取所述处理结果为异常处理结果的时间段,作为故障时间段,并将所述故障时间段发送至所述数据采集模块;
所述数据采集模块,具体用于采集并保存新原始数据,以及基于所述目标旧原始数据的标识信息,从已保存的旧原始数据中获取时间戳位于所述故障时间段内的旧原始数据,作为目标旧原始数据,并向所述数据处理模块发送所述目标旧原始数据对应的数据流和所述新原始数据对应的数据流。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010339111.0/1.html,转载请声明来源钻瓜专利网。