[发明专利]基于个人数据的采集处理及推送方法及系统

说明书

本发明提出了一种基于个人数据的采集处理及推送方法及系统，包括：由数据采集器以预设采集时间周期采集来自企业系统的内部数据和外部数据，从内部数据和外部数据中提取个人数据，以及从基本库和业务系统中采集基础数据和业务数据，根据个人数据、基础数据和业务数据建立数据模型；当数据采集器监测到数据仓库中的数据发生变化时，查找当前空闲的数据模型，并向查找到的数据模型发送数据处理指令；数据模型对待处理的数据进行数据识别和分类标记；数据调度器根据预设推送策略将个人数据库中的数据推送至用户的终端设备，并与终端设备进行交互反馈。本发明对个人数据进行统一标准维护，减少个人用户在业务数据流程周转的步骤，提高数据利用率。

技术领域

本发明涉及数据处理技术领域，特别涉及一种基于个人数据的采集处理及推送方法及系统。

背景技术

目前市面上数据的集成、转换、加载的方法建立之初时就统一规划、建立共享数据平台，这些平台通过业务系统和共享数据平台进行数据的清洗、集中和交换、提供数据源，主要是避免了业务系统间接、直接的数据交互，降低了数据传输的复杂度保证了数据的统一性和一致性。

但是业务系统越多，要全面管理这些数据的难度就越大。

第一，数据规模不断在扩大，数据的同步规则越来越复杂，管理成本越来越大；

第二，数据质量不高，数据应用的有效性不高，导致有效数据却用不起来；

第三，整个业务流程变更，新的业务随着业务的发展有所变化，因而对数据组织架构提出了新的要求。个人用户的问题变得千差万别，用户需求各不相同。业务系统变成数据孤岛，互不相通。利用个人数据需登录业务系统模块，系统越多、与“人”相关的数据就越多，要全面获取这些数据的难度就越大。但是系统越多，需要获得数据的难度越高，需要不断地去了解新的系统和应用。因此，数据中心的建设过程中，IT部门关注数据的整合过程，强调完整性和一致性。但是最容易被忽略的是，保留的数据和用户所需的数据，这两者之间的偏差无法一一对应。

专利(申请号：201010206706.5；名称：读取、存储个人数据的方法和系统、终端、服务器)公开了一种通过将终端的个人数据存储在服务器上，每次使用个人数据时都通过鉴权从服务器下载的方案，可以提高用户终端个人数据使用的安全性。但是，该技术方案仍然没有解决个人数据在庞杂的业务系统中流转时，如何提高数据流转和利用效率。

发明内容

本发明的目的旨在至少解决所述技术缺陷之一。

为此，本发明的目的在于提出一种基于个人数据的采集处理及推送方法及系统，对个人数据进行统一标准维护，可以减少个人用户在业务数据流程周转的步骤，提高数据利用率。

为了实现上述目的，本发明一方面的实施例提供了一种基于个人数据采集处理及推送方法，包括如下步骤：

步骤S1，由数据采集器以预设采集时间周期采集来自企业系统的内部数据和外部数据，从所述内部数据和外部数据中提取个人数据，以及从基本库和业务系统中采集基础数据和业务数据，根据所述个人数据、基础数据和业务数据建立数据模型，将采集到的所述基础数据、业务数据和个人数据存储至数据仓库中；

步骤S2，当所述数据采集器监测到所述数据仓库中的数据发生变化时，向数据调度器发送提示，所述数据调度器根据发生变化的数据内容和数据量，对采集任务进行拆分，形成多个待处理的数据任务，并查找当前空闲的数据模型，并向查找到的数据模型发送数据处理指令；

步骤S3，所述数据模型在接收到所述数据处理指令后，对待处理的数据进行数据识别以得到对应的个人属性，并对数据进行分类标记，再根据数据的分类标记进行数据间的关联处理，存储关联处理后的数据至个人数据库；

步骤S4，所述数据调度器根据预设推送策略将所述个人数据库中的数据推送至用户的终端设备，并与所述终端设备进行交互反馈。