[发明专利]一种数据处理方法及装置

说明书

本发明公开了一种数据处理方法及装置，涉及数据处理领域，解决了通过传统方式将不同类型数据导入不同数据库或数据表作区分时处理效率低下的问题。该方法包括：读取每行数据的权限标签，所述权限标签中记录有至少一个权限字段，每个权限字段用于表示所述数据在一个维度下的数据导入权限，一个权限字段由多位字符组成，其中每位字符用于表示数据在该位字符对应的维度分支中是否具有数据导入权限；读取所述权限字段中的字符；若所述字符表示所述数据在所述字符对应的维度分支中具有数据导入权限，则将所述数据导入到对应所述维度分支的数据表中。本发明主要用于对海量数据进行分类。

技术领域

本发明涉及数据处理领域，特别是涉及一种数据处理方法及装置。

背景技术

IPTV即交互式网络电视，是一种利用宽带有线电视网，集互联网、多媒体、通讯等多种技术于一体，向家庭用户提供包括数字电视在内的多种交互式服务的新技术。IPTV具有灵活的交互性，因为其具有网间协议(Internet Protocol，简称IP)地址网络的对称交互优势，可以采用广播、直播、回播、组播等多种播放方式，灵活的实现电子菜单、节目预约、实时快进、快退、终端账号及计费管理等，也可以基于网络的其他内容展开如网络游戏、电子理财等业务，因此IPTV逐渐被用户广泛使用。

由于IPTV能够提供多种类型的业务，因此在使用IPTV的过程中会产生大量不同类型的数据。在IPTV的数据处理中，由于原始数据所属的地区信息、业务类型等方面的不同，最终流向的数据需求方也不同，这样就需要对海量数据在来源、业务类型或者其他方面作区分处理。例如，对于北京地区的运营商来说，一般只需要获得北京地区的IPTV数据即可，而对其他地区的数据进行过滤。因此，现有对IPTV数据的处理方式是从海量的数据中把不同地区、不同业务类型的数据分别导入到不同的数据库或者不同的数据表来区分，其中部分工作需要人工完成，造成数据处理的效率低下。

发明内容

有鉴于此，本发明提出了一种数据处理方法及装置，主要目的在于解决通过传统方式将不同类型数据导入不同数据库或数据表作区分时处理效率低下的问题。

依据本发明的第一个方面，本发明提出了一种数据处理方法，包括：

读取每行数据的权限标签，权限标签中记录有至少一个权限字段，每个权限字段用于表示数据在一个维度下的数据导入权限，一个权限字段由多位字符组成，其中每位字符用于表示数据在该位字符对应的维度分支中是否具有数据导入权限；

读取权限字段中的字符；

若字符表示数据在字符对应的维度分支中具有数据导入权限，则将数据导入到对应维度分支的数据表中。

依据本发明的第二个方面，本发明提出了一种数据处理装置，包括：

读取单元，用于读取每行数据的权限标签，权限标签中记录有至少一个权限字段，每个权限字段用于表示数据在一个维度下的数据导入权限，一个权限字段由多位字符组成，其中每位字符用于表示数据在该位字符对应的维度分支中是否具有数据导入权限；以及，用于读取权限字段中的字符；

导入单元，用于当字符表示数据在字符对应的维度分支中具有数据导入权限时，将数据导入到对应维度分支的数据表中。

借由上述技术方案，本发明实施例提供的数据处理方法及装置，能够通过读取每行数据的权限标签中权限字段上的字符，根据预设的字符定义，若确定该字符能够表示数据在该字符对应的维度分支中具有数据导入权限，则将数据导入到对应所述维度分支的数据表中。与现有技术中分类海量数据时需要通过人工方式把不同地区、不同业务类型的数据分别导入到不同的数据库或者不同的数据表来区分，造成数据处理效率低下的缺陷相比，本发明通过权限标签对数据进行标识，把所有数据存储在统一的数据表或数据库中，然后根据权限标签中记录的权限字段和字符的定义，开放相应的数据权限，以实现数据处理时对不同来源，不同业务类型数据的自动区分，自动导向。