[发明专利]大数据组件管理方法、装置、服务器、电子设备及系统有效
申请号: | 202010537575.2 | 申请日: | 2020-06-12 |
公开(公告)号: | CN111694671B | 公开(公告)日: | 2023-09-01 |
发明(设计)人: | 赵宇;徐寅斐;侯雪峰 | 申请(专利权)人: | 北京金山云网络技术有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F9/54 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 丁芸;马敬 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 组件 管理 方法 装置 服务器 电子设备 系统 | ||
1.一种大数据组件管理方法,其特征在于,应用于服务器,所述方法包括:
获取操作指令,所述操作指令包括针对指定大数据组件输入的待执行任务的任务名称;
根据所述任务名称,从预先设置的各大数据组件的任务执行规范中,读取所述待执行任务的任务执行规范,并从预先设置的各大数据组件的任务执行策略中,读取所述待执行任务的任务执行策略;其中,所述任务执行规范包括:任务执行时所需要的地址信息、大数据组件可执行脚本的相关信息和可执行系统命令的相关信息,所述任务执行策略用于限定设备集群执行大数据组件时的执行方式;所述执行方式包括:设备集群中所有电子设备都执行、或者随机选择一台电子设备执行、或者指定某一台电子设备执行、或者多台电子设备并行执行,或者多台电子设备串行执行;
按照读取的所述任务执行策略,将读取的所述任务执行规范下发至设备集群,以使所述设备集群中的电子设备根据所述任务执行规范,执行所述待执行任务。
2.根据权利要求1所述的方法,其特征在于,所述获取操作指令,包括:
接收用户通过应用程序接口输入的操作指令。
3.根据权利要求1所述的方法,其特征在于,所述根据所述任务名称,从预先设置的各大数据组件的任务执行规范中,读取所述待执行任务的任务执行规范,并从预先设置的各大数据组件的任务执行策略中,读取所述待执行任务的任务执行策略,包括:
根据所述任务名称,从数据库中读取所述待执行任务的任务执行规范及任务执行策略,其中,所述数据库中存储有针对各大数据组件的不同任务预先设置的任务执行规范及任务执行策略。
4.根据权利要求3所述的方法,其特征在于,所述数据库以缓存队列的方式存储各大数据组件的不同任务各执行步骤的任务执行规范;
所述根据所述任务名称,从数据库中读取所述待执行任务的任务执行规范及任务执行策略,包括:
根据所述任务名称,按照所述缓存队列的存储顺序,从所述数据库中依次读取所述待执行任务各执行步骤的任务执行规范,并根据所述任务名称,从所述数据库中,读取所述待执行任务的任务执行策略;
所述按照读取的所述任务执行策略,将读取的所述任务执行规范下发至设备集群,包括:
按照读取的所述任务执行策略,以所述缓存队列的方式,将读取的所述待执行任务各执行步骤的任务执行规范下发至设备集群,以使所述设备集群中的电子设备根据所述待执行任务各执行步骤的任务执行规范,依次执行所述待执行任务的各执行步骤。
5.根据权利要求1所述的方法,其特征在于,所述按照读取的所述任务执行策略,将读取的所述任务执行规范下发至设备集群,包括:
按照读取的所述任务执行策略,通过远程过程调用协议,将读取的所述任务执行规范下发至设备集群,以使所述设备集群中的电子设备根据所述任务执行规范,执行所述待执行任务。
6.根据权利要求1所述的方法,其特征在于,所述操作指令还包括电子设备数量;
所述按照读取的所述任务执行策略,将读取的所述任务执行规范下发至设备集群,包括:
根据所述电子设备数量,从设备集群中选择多个电子设备;
按照读取的所述任务执行策略,将读取的所述任务执行规范下发至所述多个电子设备中,以使各电子设备根据所述任务执行规范,执行所述待执行任务。
7.根据权利要求1所述的方法,其特征在于,在所述按照读取的所述任务执行策略,将读取的所述任务执行规范下发至设备集群之后,所述方法还包括:
接收所述设备集群反馈的任务执行结果;
根据所述任务执行结果,调整所述任务执行策略;
按照调整后的所述任务执行策略,将所述任务执行规范下发至所述设备集群。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司,未经北京金山云网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010537575.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置