[发明专利]一种处理报表数据的方法和装置

权利要求书

1.一种处理报表数据的方法，其特征在于，所述方法包括：

预先确定目标报表的各SQL语句的数据库标识，并基于所述数据库标识对各SQL语句进行适应式修改，其中，所述数据库标识至少包括MySQL数据库标识和HIVE数据库标识；

当取出目标SQL语句时，在所述目标SQL语句的数据库标识对应的数据库上执行所述目标SQL语句，得到所述目标SQL语句的指标计算结果并缓存在本地；

周期性检测数据库报错或SQL语句报错，如果检测到报错，则基于报错类型对应的处理策略以及缓存的指标计算结果，自动对所述目标报表进行生成处理；

所述如果检测到报错，则基于报错类型对应的处理策略以及缓存的指标计算结果，自动对所述目标报表进行生成处理，包括：

当检测到数据库报错时，记录当前指标的报错参数，并在预设时长后，基于所述报错参数重新计算所述当前指标的指标计算结果；

根据重新计算的所述当前指标的指标计算结果和已缓存的指标计算结果，对所述目标报表进行生成处理。

2.根据权利要求1所述的方法，其特征在于，所述预先确定目标报表的各SQL语句的数据库标识，包括：

获取所述目标报表的各SQL语句在MySQL数据库的执行时间；

将所述执行时间超过预设时间的SQL语句的数据库标识，确定为HIVE数据库标识。

3.根据权利要求1所述的方法，其特征在于，所述预先确定目标报表的各SQL语句的数据库标识之后，还包括：

将所述目标报表的各SQL语句所需的业务数据，同步至各SQL语句的数据库标识所对应的数据库。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

当检测到SQL语句报错时，记录当前指标的报错参数，并返回空数据，以继续执行其它SQL语句；

在预设时长后，基于所述报错参数重新计算所述当前指标的指标计算结果，并根据重新计算的所述当前指标的指标计算结果和已缓存的指标计算结果，对所述目标报表进行生成处理。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：

如果重新生成所述目标报表，则在所述目标报表中确定重新计算的指标；

基于所述重新计算的指标的指标计算结果和缓存的目标报表中其余指标的指标计算结果，重新生成所述目标报表。

6.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：

周期性检测HIVE数据库的资源占用率；

如果所述HIVE数据库的资源占用率超过预设占用率，则暂停执行SQL语句，直至检测到所述HIVE数据库的资源占用率低于所述预设占用率时，继续执行SQL语句。

7.一种处理报表数据的装置，其特征在于，所述装置包括：

修改模块，用于预先确定目标报表的各SQL语句的数据库标识，并基于所述数据库标识对各SQL语句进行适应式修改，其中，所述数据库标识至少包括MySQL数据库标识和HIVE数据库标识；

缓存模块，用于当取出目标SQL语句时，在所述目标SQL语句的数据库标识对应的数据库上执行所述目标SQL语句，得到所述目标SQL语句的指标计算结果并缓存在本地；

检测模块，用于周期性检测数据库报错或SQL语句报错，如果检测到报错，则基于报错类型对应的处理策略以及缓存的指标计算结果，自动对所述目标报表进行生成处理；

所述如果检测到报错，则基于报错类型对应的处理策略以及缓存的指标计算结果，自动对所述目标报表进行生成处理，包括：

当检测到数据库报错时，记录当前指标的报错参数，并在预设时长后，基于所述报错参数重新计算所述当前指标的指标计算结果；

根据重新计算的所述当前指标的指标计算结果和已缓存的指标计算结果，对所述目标报表进行生成处理。