[发明专利]数据处理方法、装置、计算机设备和计算机可读存储介质在审
申请号: | 202211236677.6 | 申请日: | 2022-10-10 |
公开(公告)号: | CN115658745A | 公开(公告)日: | 2023-01-31 |
发明(设计)人: | 桑文锋;曹犟;刘耀洲;付力力;郭雪东 | 申请(专利权)人: | 神策网络科技(北京)有限公司 |
主分类号: | G06F16/2457 | 分类号: | G06F16/2457;G06F16/23;G06F16/22 |
代理公司: | 深圳紫藤知识产权代理有限公司 44570 | 代理人: | 苏蕾 |
地址: | 100083 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 计算机 设备 可读 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
通过计算引擎获取待处理数据,根据所述计算引擎的状态后端中的数据状态对所述待处理数据进行处理,得到处理后数据;
根据所述处理后数据对所述计算引擎的状态后端的数据状态进行更新,得到更新后数据状态;
将所述处理后数据以及所述更新后数据状态保存至外部文件中;
向请求数据的数据接收端发送所述处理后数据,并在所述外部文件对已发送至所述数据接收端的处理后数据进行标识;
当所述计算引擎发生服务异常,所述数据状态被恢复至检查点事件指示的存盘数据状态时,从所述外部文件中,获取存储的未被标识的目标处理后数据,以及所述目标处理后数据对应的目标数据状态;
根据所述目标数据状态对所述状态后端的存盘数据状态进行更新,并将目标处理后数据发送至所述数据接收端。
2.根据权利要求1所述的方法,其特征在于,所述在所述外部文件对已发送至所述数据接收端的处理后数据进行标识,包括:
获取所述已发送至数据接收终端的处理后数据对应的数据标识;
将所述数据标识存储于所述外部文件中预设的索引文件中。
3.根据权利要求1所述的方法,其特征在于,所述向请求数据的数据接收端发送所述处理后数据,并在所述外部文件对已发送至所述数据接收端的处理后数据进行标识,包括:
将所述处理后数据提交至消息队列中,以便通过所述消息队列将所述处理后数据发送至所述数据接收端;
在所述外部文件对已提交至所述消息队列的处理后数据进行标识。
4.根据权利要求3所述的方法,其特征在于,所述将目标处理后数据发送至所述数据接收端,包括:
获取所述消息队列中的处理后数据对应的数据标识;
若所述消息队列中的数据标识与所述目标处理后数据对应的数据标识不匹配,则将所述目标处理后数据发送至所述消息队列中,以便通过所述消息队列将所述处理后数据发送至所述数据接收端。
5.根据权利要求1所述的方法,其特征在于,所述通过计算引擎获取待处理数据,包括:
接收待处理数据,并将所述待处理数据存储至数据接收队列中;
通过计算引擎从所述数据接收队列中,获取待处理数据。
6.根据权利要求5所述的方法,其特征在于,所述通过计算引擎从所述数据接收队列中,获取待处理数据之后,所述方法还包括:
将所述待处理数据在所述数据接收队列中的数据读取位置,存储至所述外部文件中;
所述根据所述目标数据状态对所述状态后端的存盘数据状态进行更新之后,所述方法还包括:
从所述数据接收队列中获取当前待处理数据,以及所述当前待处理数据对应的当前数据读取位置;
从所述外部文件中获取所述目标数据读取位置;
若所述数据读取位置与所述目标数据读取位置之间的位置关系满足预设条件,则对所述当前待处理数据进行处理,得到处理后数据。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述根据所述计算引擎的状态后端中的数据状态对所述待处理数据进行处理,得到处理后数据,包括:
从所述计算引擎的状态后端中,获取与所述待处理数据对应的数据状态,所述数据状态包含对历史待处理数据进行数据处理得到的处理后数据;
基于所述数据状态与所述待处理数据进行数据处理,得到处理后数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于神策网络科技(北京)有限公司,未经神策网络科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211236677.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:列车感知系统、列车控制系统及列车感知方法
- 下一篇:一种全封闭绝缘隔离开关