[发明专利]基于Omid事务分析系统的联机分析处理的方法

说明书

基于Omid事务分析系统的联机分析处理的方法，属于数据处理领域。现有的Yahoo的事务处理系统Omid只适用于联机事务处理(OLTP)，并不适用于联机分析处理(OLAP)；且没有给出在联机事务处理过程中如何区分长事务和短事务的问题。一种基于Omid事务分析系统的联机分析处理的方法，将联机分析处理加入Omid事务分析系统；根据分析型事务为只读事务的原理，将其与长事务和短事务进行区分，从而先判断出分析型事务；在判断出分析型事务后剩余的事务中，使用机器学习回归算法区分长事务和短事务，对长事务和短事务并行处理。本发明有效地增加了联机分析处理的可扩展性、降低了时延。

技术领域

本发明涉及一种基于Omid事务分析系统的联机分析处理的方法。

背景技术

目前，为了保证公共云平台所提供的大数据服务的可靠性，必须对应用于大数据平台的事务处理技术的各项性能进行改进。因此，文章“Taking Omid to the Clouds：Fast，Scalable Transactions for Real-Time Cloud Analytics”提出了对Yahoo的事务处理系统Omid的改进方案，提升了它的可扩展性和实时性，使其能够应用于大型多用户云平台。主要改进方案如下：

1；设计了Omid LL协议，将提交事务处理从原来的集中式改为分布式。Omid LL将提交事务处理中核心的更新提交表(Commit Table)的工作分布在了各个客户机处，而没有继续采用让事务处理器(Transaction Manager)进行集中更新的机制。

2；设计了对于单键值事务的特殊处理协议Omid FP，此协议放弃了向事务处理器发送开始事务与提交事务的机制，设计了新的算法与接口来加速短事务的处理。

但上述的技术方法存在如下缺陷：

文章“Taking Omid to the Clouds：Fast，Scalable Transactions for Real-Time Cloud Analytics”提出的技术只适用于联机事务处理(OLTP)，并不适用于联机分析处理(OLAP)。但是，目前环境对于联机分析处理的可扩展性要求也在逐渐提高。另外，文章也没有提出对于联机事务处理中，长事务和短事务的区分。

发明内容

本发明的目的是为了解决现有的Yahoo的事务处理系统Omid只适用于联机事务处理(OLTP)，并不适用于联机分析处理(OLAP)；且没有给出在联机事务处理过程中如何区分长事务和短事务的问题，而提出一种基于Omid事务分析系统的联机分析处理的方法。

一种基于Omid事务分析系统的联机分析处理的方法，

步骤一、将联机分析处理加入Omid事务分析系统；

步骤二、根据分析型事务为只读事务的原理，将其与长事务和短事务进行区分，从而先判断出分析型事务；

步骤三、在判断出分析型事务后剩余的事务中，使用机器学习回归算法区分长事务和短事务；

步骤四、在将事务分成长事务和短事务之后，长事务和短事务开始并行处理，由Omid FP直接开始对短事务进行处理；由Omid LL处理长事务。

本发明的有益效果为：

本发明的关键点有二，其一在于将联机分析处理加入Omid事务分析系统，并针对分析型事务进行了加锁处理。其二在于有效地应用了机器学习回归算法。实现了联机事务处理中，长事务与短事务的区分。

与现有的方法相比，本发明提出的系统有效地增加了联机分析处理的可扩展性、降低了时延。同时也对Omid事务分析系统进行了完善补充，使其能够更加适应大型多用户云平台。另外，本发明提出的事务类型的区分算法也大大提高了原系统的效率。

附图说明

图1为本发明的方法流程图；