[发明专利]一种海量数据统计方法

说明书

技术领域

本发明涉及一种信息技术，尤其涉及一种海量数据统计方法。

背景技术

传统大型应用软件系统对其应用的管理对象采集必要的数据进行统计分析，一般而言，统计分析的数据量都非常巨大，如中国移动在进行业务推广过程中需要针对不同的用户群采用不同的推广策略。目前分析用户群主要是根据用户产生的话单来分析，每个省的短信话单每天就有好几百万甚至上千万，并且数据还要保存3个月。要从如此海量的数据中找出各类用户群，并针对性地开展业务推广，传统的方法是先把话单数据导入数据库，由于许多数据分布在不同的表中，因此需要根据多表关联遍历数据库，当同时关联表超过3-4个时，查询效率明显降低，逐条记录查询、插入用户话单和其他统计报表又将严重影响统计分析性能。况且，用户按其属性分类包括免费用户群(黑名单)，点播业务用户群，点播业务高端用户群，包月业务用户群，包月业务高端用户群，白银用户，黄金用户，钻石用户。每一种用户都有各自的查询条件，每月还需根据上月的话单情况更新用户分类数据，完成如此多的业务统计分析按传统的方法需要单独的系统，而且运行非常低，如和其他业务平台共同运行则会严重影响其他业务的正常运行。

免费用户群(黑名单)：

此类用户只使用SP提供的免费业务或只在业务的免费期使用业务，从不使用付费业务。这些用户对短信业务费用非常敏感，是造成短信业务投诉的主要用户群。我们将其定义为″黑名单″，是指在短信业务推广过程中要尽量避免此类用户。

点播业务用户群：

此类用户只使用SP提供的点播业务，从不使用包月定制业务。这些用户往往对SP的业务非常熟悉，对业务的及时性、专业性要求较高，对短信资费较为敏感，不过一旦业务定位符合其需要，此类用户也极易成为点播业务的高端用户。

点播业务高端用户群：

此类用户是点播业务的高端用户。除了具备点播业务用户的特点之外，此类用户在点播业务上的支出较大，往往也能在短信中获利。他们是点播业务的忠实用户，较易接受短信业务的推广。

高端的界定标准是每月点播的条数。可由用户选择。

包月业务用户群：

此类用户只使用SP提供的包月定制业务。这些用户对SP的业务不是非常熟悉，对业务的成熟度要求较高，对短信资费不是非常敏感，较易接受短信业务的推广。

包月业务高端用户群：

此类用户是包月业务的高端用户。这些用户对SP的业务非常熟悉，对业务的接纳程度高，对短信资费不敏感，很容易接受短信业务的推广。

高端的界定标准是每月包月业务的总项目数。可由用户选择。

白银用户：

此类用户属于短信业务的高端用户。这些用户在短信业务上的花费较高。是运营商应该采取一定的奖励策略保有的用户群。

此类用户的界定标准是每月包月业务的总项目数与点播业务总条数的加权和。可由用户选择。

黄金用户：

此类用户属于短信业务的高端用户。这些用户在短信业务上的花费较白银用户高。是运营商应该采取更高的奖励策略保有的用户群。

此类用户的界定标准是每月包月业务的总项目数与点播业务总条数的加权和。可由用户选择。

钻石用户：

此类用户属于短信业务的高端用户。这些用户在短信业务上的花费较黄金用户高。是运营商应该想尽一切办法保有的用户群。

此类用户的界定标准是每月包月业务的总项目数与点播业务总条数的加权和。可由用户选择。

发明内容

本发明的目的，在于提供一种海量数据统计方法。

本发明的目的是这样实现的：一种海量数据统计方法，包括以下内容：

A、建立MT、MC、MO三个数据库表结构

A1、把MT、MC、MO三个表分别分成多个分区，每个分区相当于一个数据库小表，数据插入按分区进行，按日期划分分区，分区号根据日期产生且值在分区号范围内循环更新；

A2、在MT、MC、MO三个表中分别建立五个数据表空间，一个分区使用一个表空间，相隔五个号的分区使用相同的表空间，即第6个分区使用和第1个分区相同的表空间，其他类推；

A3、将CDR话单按属性区分为免费用户群、点播用户群和包月用户群，将免费用户群话单数据存放在MT表中、将点播用户群话单数据存放在MC表中、将包月用户群话单数据存放在MO表中；

A4、各分区分别根据手机号建立索引；

A5、建立免费用户群表，该表包含用户手机号码和状态二个字段，数据存放在特定的表空间，用户手机号码为主键，并使用索引表空间；