[发明专利]一种数据处理服务系统

说明书

技术领域

本发明涉及数据处理领域，具体涉及一种数据处理服务系统。

背景技术

目前，数据产品处理服务系统主要由中央控制服务模型及产品处理服务模型两大部分组成，它主要用于对科学数据进行处理处理。数据产品处理子系统将原始数据（通过汇集子系统汇集的各台站，节点站，各仪器设备的观测数据）依据其类型作相应的处理处理，如数据文件解析，格式转化，标准化，可视化等，并生成相应的数据产品（包括标准化数据文件、可视化图形文件等）。具体而言，中央控制模型主要负责对处理请求的处理调度，并依据不同类型的请求调用相应的处理服务，它还负责与其他子系统的数据交换接口；处理服务模型主要负责具体的处理服务，它接收来自中央控制模型的处理服务指令，调用相应的处理服务并将处理结果返回给中央控制模块。产品处理模型最终的产品，也就是标准化数据文件，采用CDF(Common Data Format)文件格式，包含了科学数据信息及其描述信息（元数据信息）；处理服务模型中的可视化模块同时会依据相应的科学数据文件绘制可视化图形文件，以服务于后期的科学研究。产品处理模型引入了“数据模板”作为对原始数据文件的描述，模板定义了原始数据的相关信息，包括其解析规则，标准化、可视化方式等，处理模型主要是依据“数据模板”中的相关信息来处理原始数据并生成相应的科学数据产品。

由于原始数据格式、类型复杂多样，不便于使用，本发明提供一种数据产品处理系统，即是通过一定的规则，解析原始数据并将原始数据转换为标准化的科学数据，同时，还可以依据相应的模板内容对标准化数据进行可视化绘图，生成科学图片等。一方面连接数据库分系统，获取待处理数据，进行各种常规数据产品的处理，同时将处理产品入库；另一方面，提供与其他子系统进行交互的接口，数据共享和分发子系统可以动态地调用处理服务，获取动态数据产品处理服务。

发明内容

本发明提供一种数据处理服务系统，数据处理服务系统主要是指对具体的数据文件，依据模板描述信息进行处理处理，并返回处理结果的过程。它主要分为文件格式转化、文件的标准化与可视化，响应动态处理请求等，由中控模块统一调度。

系统采用层次模式，包括数据层、应用层和服务层；能够响应来自不同子系统的处理请求，不仅需要进行例行数据产品处理，且为数据分发和共享子系统的不同用户提供不同的数据产品处理服务。数据产品处理模型应用层向下连接原始数据库及标准化、可视化产品库，根据相关配置生成各种常规数据产品，存入原始数据库，另一方面连接数据分发和共享子系统，根据来自分发、共享子系统的请求提供相应的数据产品，供用户使用。数据层，也即数据库分系统，包括一个数据源及两个科学数据产品库。处理服务系统实际上是将原始数据依据一定的规则，解析并作标准化转换，转化为标准化产品文件及可视化科学数据并科学数据产品库。对于数据产品处理服务系统来说，数据库又可进一步具体分为原始数据库、标准化科学数据库和可视化科学数据库，分别存放原始数据、标准化格式的科学数据产品和可视化产品数据。

由于原始数据格式、类型复杂多样，不便于使用，采用本发明提供的数据产品处理系统，一方面连接数据库分系统，获取待处理数据，进行各种常规数据产品的处理，同时将处理产品入库；另一方面，提供与其他子系统进行交互的接口，数据共享和分发子系统可以动态地调用处理服务，获取动态数据产品处理服务。

附图说明

图1为数据产品处理系统结构图。

具体实施方式

数据处理服务系统主要是指对具体的数据文件，依据模板描述信息进行处理处理，并返回处理结果的过程。它主要分为文件格式转化、文件的标准化与可视化，响应动态处理请求等，由中控模块统一调度。

系统采用层次模式，包括数据层、应用层和服务层。具体如图1所示：数据产品处理系统需要响应来自不同子系统的处理请求，不仅需要进行例行数据产品处理，且为数据分发和共享子系统的不同用户提供不同的数据产品处理服务。数据产品处理模型应用层向下连接原始数据库及标准化、可视化产品库，根据相关配置生成各种常规数据产品，存入原始数据库，另一方面连接数据分发和共享子系统，根据来自分发、共享子系统的请求提供相应的数据产品，供用户使用。数据层，也即数据库分系统，包括一个数据源及两个科学数据产品库。处理服务系统实际上是将原始数据依据一定的规则，解析并作标准化转换，转化为标准化产品文件及可视化科学数据并科学数据产品库。对于数据产品处理服务系统来说，数据库又可进一步具体分为原始数据库、标准化科学数据库和可视化科学数据库，分别存放原始数据、标准化格式的科学数据产品和可视化产品数据。