[发明专利]数据处理方法及装置在审
申请号: | 202110182319.0 | 申请日: | 2021-02-10 |
公开(公告)号: | CN113297268A | 公开(公告)日: | 2021-08-24 |
发明(设计)人: | 梁卜元;酆晓杰 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/27;G06K9/62 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 李晓庆 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 | ||
1.一种数据处理方法,包括:
获取第一数据节点的运行状态参数,并基于预设特征提取规则提取所述运行状态参数的参数特征;
将所述参数特征输入数据节点决策模型,获得预设时长内所述参数特征对应的数据节点决策结果;
基于所述数据节点决策结果向数据节点资源池发送数据节点调整请求,其中,所述数据节点资源池由第一数据节点和第二数据节点组成;
确定所述数据节点资源池基于所述数据节点调整请求调整所述第一数据节点或第二数据节点后的目标数据节点,并基于所述目标数据节点进行数据处理。
2.根据权利要求1所述的数据处理方法,所述获取第一数据节点的运行状态参数之前,还包括:
按照预设时间间隔获取第一数据节点,在所述预设时长内的历史运行状态参数的历史参数特征,以及所述历史参数特征对应的数据节点决策结果;
将所述历史参数特征作为训练数据,将所述数据节点决策结果作为标签,基于所述训练数据和所述标签形成训练样本;
将所述训练样本输入初始数据节点决策模型,获得所述初始数据节点决策模型的网络参数;
基于所述网络参数对所述初始数据节点决策模型进行训练,以获得数据节点决策模型。
3.根据权利要求2所述的数据处理方法,所述获得数据节点决策模型之后,还包括:
将所述数据节点决策模型存储至对象存储服务平台;
相应的,所述将所述参数特征输入数据节点决策模型,包括:
从所述对象存储服务平台调用所述数据节点决策模型,并将所述参数特征输入数据节点决策模型。
4.根据权利要求1所述的数据处理方法,所述基于所述数据节点决策结果向数据节点资源池发送数据节点调整请求,包括:
在基于所述运行状态参数确定的数据节点策略结果,与基于所述数据节点决策模型获得的数据节点策略结果不匹配的情况下,基于所述运行状态参数确定的数据节点策略结果向数据节点资源池发送数据节点调整请求。
5.根据权利要求1所述的数据处理方法,所述获取第一数据节点的运行状态参数之后,还包括:
若不存在数据节点决策模型且不存在所述第一数据节点的历史运行状态参数,则将所述历史运行状态参数与预设参数阈值进行比较,基于比较结果向数据节点资源池发送数据节点调整请求。
6.根据权利要求3所述的数据处理方法,所述获取第一数据节点的运行状态参数,并基于预设特征提取规则提取所述运行状态参数的参数特征之后,还包括:
将所述运行状态参数的参数特征存储至所述对象存储服务平台;
相应的,所述按照预设时间间隔获取第一数据节点,在所述预设时长内的历史运行状态参数的历史参数特征,包括:
按照预设时间间隔从所述对象存储服务平台获取第一数据节点,在所述预设时长内的历史运行状态参数的历史参数特征。
7.根据权利要求1所述的数据处理方法,所述数据节点决策结果包括数据节点扩容以及数据节点扩容数量;
相应的,所述基于所述数据节点决策结果向数据节点资源池发送数据节点调整请求,包括:
基于所述数据节点决策结果向数据节点资源池发送数据节点扩容请求,其中,所述数据节点扩容请求中携带有数据节点扩容数量;
相应的,所述确定所述数据节点资源池基于所述数据节点调整请求调整所述第一数据节点或第二数据节点后的目标数据节点,并基于所述目标数据节点进行数据处理,包括:
接收所述数据节点资源池基于所述数据节点扩容请求中携带的数据节点扩容数量,增加的第二数据节点;
将所述第一数据节点和增加的第二数据节点确定为目标数据节点,并基于所述目标数据节点进行数据处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110182319.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:分布式系统中分布式锁调度方法及装置
- 下一篇:数据存储方法以及装置