[发明专利]用于网站集群的数据处理方法和装置

权利要求书

1.一种用于网站集群的数据处理方法，其特征在于，包括：

获取目标网站的配置信息，所述目标网站的配置信息为所述目标网站的域名与与所述目标网站处于同一网站集群中的链入链出网站的域名之间的域名配置关系的信息，所述链入链出网站为与所述目标网站之间存在数据链入链出的网站，所述目标网站和所述链入链出网站为同一网站集群中的网站，其中，所述目标网站和所述链入链出网站为相对的；

获取所述目标网站的数据源，所述数据源用于存储所述目标网站的链入链出数据；

通过所述配置信息对所述数据源中的链入链出数据进行过滤，得到过滤后的链入链出数据；以及

统计所述过滤后的链入链出数据的流量值。

2.根据权利要求1所述的用于网站集群的数据处理方法，其特征在于，通过所述配置信息对所述数据源中的链入链出数据进行过滤，得到过滤后的链入链出数据包括：

根据所述配置信息生成结构化查询语言SQL配置语句；

执行所述SQL配置语句以生成临时表，所述临时表用于存储所述配置信息；

以及

根据所述临时表对所述数据源中的链入链出数据进行过滤，得到过滤后的链入链出数据。

3.根据权利要求2所述的用于网站集群的数据处理方法，其特征在于，根据所述配置信息生成结构化查询语言SQL配置语句包括：

将所述配置信息进行转化，得到转化信息；

申明临时表变量；以及

将所述转化信息插入临时表变量，得到所述SQL配置语句。

4.根据权利要求1所述的用于网站集群的数据处理方法，其特征在于，在统计所述过滤后的链入链出数据的流量值之前，所述数据处理方法还包括：

获取结构化查询语言SQL抽取语句；

通过所述SQL抽取语句对过滤后的链入链出数据进行抽取，得到抽取后的链入链出数据，

其中，统计所述抽取后的链入链出数据的流量值。

5.根据权利要求4所述的用于网站集群的数据处理方法，其特征在于，在通过所述SQL抽取语句对过滤后的链入链出数据进行抽取，得到抽取后的链入链出数据之后，所述数据处理方法还包括：

将抽取得到的链入链出数据存储至目标数据库中；或者

将所述抽取得到的链入链出数据存储至数据仓库中。

6.一种用于网站集群的数据处理装置，其特征在于，包括：

第一获取单元，用于获取目标网站的配置信息，所述目标网站的配置信息为所述目标网站的域名与与所述目标网站处于同一网站集群中的链入链出网站的域名之间的域名配置关系的信息，所述链入链出网站为与所述目标网站之间存在数据链入链出的网站，所述目标网站和所述链入链出网站为同一网站集群中的网站，其中，所述目标网站和所述链入链出网站为相对的；

第二获取单元，用于获取所述目标网站的数据源，所述数据源用于存储所述目标网站的链入链出数据；

过滤单元，用于通过所述配置信息对所述数据源中的链入链出数据进行过滤，得到过滤后的链入链出数据；以及

统计单元，用于统计所述过滤后的链入链出数据的流量值。

7.根据权利要求6所述的用于网站集群的数据处理装置，其特征在于，所述过滤单元包括：

生成模块，用于根据所述配置信息生成结构化查询语言SQL配置语句；

执行模块，用于执行所述SQL配置语句以生成临时表，所述临时表用于存储所述配置信息；以及

过滤模块，用于根据所述临时表对所述数据源中的链入链出数据进行过滤，得到过滤后的链入链出数据。

8.根据权利要求7所述的用于网站集群的数据处理装置，其特征在于，所述生成模块包括：

转化子模块，用于将所述配置信息进行转化，得到转化信息；

申明子模块，用于申明临时表变量；以及

插入子模块，用于将所述转化信息插入临时表变量，得到所述SQL配置语句。

9.根据权利要求6所述的用于网站集群的数据处理装置，其特征在于，所述数据处理装置还包括：

第三获取单元，用于在统计所述过滤后的链入链出数据的流量值之前，获取结构化查询语言SQL抽取语句；

抽取单元，用于通过所述SQL抽取语句对过滤后的链入链出数据进行抽取，得到抽取后的链入链出数据，

其中，所述统计单元还用于统计所述抽取后的链入链出数据的流量值。

10.根据权利要求9所述的用于网站集群的数据处理装置，其特征在于，所述数据处理装置还包括：

第一存储单元，用于在通过所述SQL抽取语句对过滤后的链入链出数据进行抽取，得到抽取后的链入链出数据之后，将抽取得到的链入链出数据存储至目标数据库中；或者

第二存储单元，用于将所述抽取得到的链入链出数据存储至数据仓库中。