[发明专利]一种信息确定方法、电子设备及计算机存储介质在审
申请号: | 201910708993.0 | 申请日: | 2019-08-01 |
公开(公告)号: | CN110609850A | 公开(公告)日: | 2019-12-24 |
发明(设计)人: | 李栋;马鹏程 | 申请(专利权)人: | 联想(北京)有限公司 |
主分类号: | G06F16/2453 | 分类号: | G06F16/2453;G06F16/901 |
代理公司: | 11270 北京派特恩知识产权代理有限公司 | 代理人: | 姚璐;张颖玲 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 待处理信息 第一数据 计算机存储介质 电子设备 目标策略 信息确定 | ||
本发明实施例公开了一种信息确定方法,该方法包括:获取待处理信息对应的历史策略和每一所述历史策略的执行效率;基于所述历史策略和每一所述历史策略的执行效率生成第一数据集;获取当前执行所述待处理信息时,所述待处理信息对应的第一参数;基于所述第一数据集和所述第一参数,确定用于执行所述待处理信息的目标策略。本发明实施例同时还公开了一种电子设备及计算机存储介质。
技术领域
本发明涉及电子与信息技术领域,尤其是涉及一种信息确定方法、电子设备及计算机存储介质。
背景技术
现有技术中Spark都是通过使用有向无环图(Directed Acyclic Graph,DAG)来处理大数据技术中数据计算任务,在多次利用Spark进行同一数据计算任务时,每次需要基于Spark当前执行环境对应的参数或者数据状态,生成其对应的一种DAG来执行该数据的计算;而相关技术中Spark基于当前参数生成的DAG来执行数据的计算时,无法确定该DAG对应的计算效率为最优,这样容易降低利用Spark进行数据计算时整体的执行性能。
发明内容
为解决上述技术问题,本发明实施例期望提供一种信息确定方法、电子设备及计算机存储介质,从而使得当前Spark生成的DAG来执行数据计算时的计算效率是最优的,提高了利用Spark进行数据计算时整体的执行性能。
为达到上述目的,本发明的技术方案是这样实现的:
一种信息确定方法,所述方法包括:
获取待处理信息对应的历史策略和每一所述历史策略的执行效率;
基于所述历史策略和每一所述历史策略的执行效率生成第一数据集;
获取当前执行所述待处理信息时,所述待处理信息对应的第一参数;
基于所述第一数据集和所述第一参数,确定用于执行所述待处理信息的目标策略。
可选地,所述基于所述历史策略和每一所述历史策略的执行效率生成第一数据集,包括:
基于每一所述历史策略的执行效率,设置所述历史策略的排列顺序;
按照所述排列顺序,基于所述历史策略和每一所述历史策略的执行效率,生成所述第一数据集。
可选地,所述基于所述第一数据集和所述第一参数,确定用于执行所述待处理信息的目标策略,包括:
确定所述历史策略的优先级;
获取与所述第一数据集对应的第二参数;
按照所述历史策略的优先级,基于所述第一数据集、所述第二参数和所述第一参数确定所述目标策略。
可选地,所述按照所述历史策略的优先级,基于所述第一数据集、所述第二参数和所述第一参数确定所述目标策略,包括:
若所述第二参数中存在与所述第一参数匹配的参数,按照所述历史策略的优先级,从所述第一数据集中确定所述目标策略。
可选地,所述方法还包括:
若所述第二参数中不存在与所述第一参数匹配的参数,基于所述第二参数确定基础策略;
按照所述历史策略的优先级,基于所述第一数据集和所述基础策略确定所述目标策略。
可选地,所述按照所述历史策略的优先级,基于所述第一数据集和所述基础策略确定所述目标策略,包括:
基于所述基础策略和所述历史策略,生成当前策略;
设置所述当前策略的优先级;
按照所述当前策略的优先级,从所述第一数据集和所述基础策略中确定所述目标策略。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于联想(北京)有限公司,未经联想(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910708993.0/2.html,转载请声明来源钻瓜专利网。