[发明专利]实现流式源数据解析的方法和装置

摘要

本公开揭示了一种实现流式源数据解析的方法和装置。所述方法包括：拉取流式源数据并缓存；调用与缓存的流式源数据相匹配的数据解析插件；通过调用的所述数据解析插件处理缓存的流式源数据得到目标数据；向指定目的地分发目标数据，目标数据通过所述分发进行数据落地。在此实现过程中，将流式源数据处理插件化，只要按照拉取的流式源数据调用数据解析插件即可支持此流式源数据的数据格式，完成其所对应的实时解析和落地存储过程，而并不需要重新进行相应的业务开发，也将使得所实现的数据汇集能够支持各种数据格式，甚至于新的数据格式，所需的工作量也只是编码对应的数据解析插件，全面支持各种数据源的流式源数据解析。

主权项

1.一种实现流式源数据解析的方法，其特征在于，所述方法包括：拉取流式源数据，并缓存，所述流式源数据是流式地上报至数据源的数据；调用与缓存的所述流式源数据相匹配的数据解析插件，所述数据解析插件是预先配置的；通过调用的所述数据解析插件处理所述缓存的流式源数据得到目标数据；向指定目的地分发所述目标数据，所述目标数据通过所述分发进行数据落地。