[发明专利]因子数据获取方法、装置、计算机设备和存储介质

权利要求书

1.一种因子数据获取方法，其特征在于，所述方法包括：

按照预设频次从多个数据源中提取数据结构不同的源数据，并将提取到的所述源数据作为异构多源数据；

将所述异构多源数据加载至数据湖，并在所述数据湖中利用分布式处理组件对加载到的所述异构多源数据进行分层处理得到因子键值数据；

将所述因子键值数据对应的因子服务部署至容器并暴露对应的调用接口，所述调用接口用于指示终端调取对应的需求因子数据。

2.根据权利要求1所述的方法，其特征在于，所述在所述数据湖中利用分布式处理组件对加载到的所述异构多源数据进行分层处理得到因子键值数据，包括：

从所述异构多源数据中抽取目标源数据，按照预设过滤算法对所述目标源数据进行过滤处理得到过滤目标数据，并将所述过滤目标数据加载至数据仓库；

根据预设的主题类型对所述数据仓库中的数据进行主题类型划分得到不同主题数据库；

基于不同的所述主题数据库进行特征化处理得到模型数据，并对所述模型数据进行混合处理得到数据集市，所述数据集市中包括因子键值数据。

3.根据权利要求2所述的方法，其特征在于，所述根据预设的主题类型对所述数据仓库中的数据进行主题类型划分得到不同主题数据库，包括：

获取业务需求，并基于所述业务需求确定主题类型；

根据所述主题类型对所述数据仓库中的数据进行聚类处理，得到不同主题类型分别对应的主题数据库。

4.根据权利要求3所述的方法，其特征在于，所述基于不同的所述主题数据库进行特征化处理得到模型数据，并对所述模型数据进行混合处理得到数据集市，包括：

基于所述业务需求对所述主题数据库中的数据进行数据抽取得到抽取业务数据；

获取数据转换算法，并根据所述数据转换算法对所述抽取业务数据进行数据转换处理得到转换数据；

对所述转换数据进行装载处理得到装载数据，并将所述转载数据作为数据集市。

5.根据权利要求1所述的方法，其特征在于，所述将所述因子键值数据对应的因子服务部署至容器，包括：

获取因子键值数据，以及所述因子键值数据对应的因子管理配置；

根据所述因子键值数据以及所述因子管理配置确定因子服务；

将所述因子服务部署至服务容器。

6.根据权利要求1至5中任意一项所述的方法，其特征在于，所述方法还包括：

接收用户业务请求，所述用户业务请求中携带用户信息以及待请求地址；

根据所述用户信息校验所述用户单位时间内的网络流量，当所述网络流量满足预设条件时，基于所述待请求地址调用对应的调用接口，根据所述调用接口调取需求因子数据。

7.根据权利要求1至5中任意一项所述的方法，其特征在于，所述方法还包括：

将所述需求因子数据存储至区块链中。

8.一种因子数据获取装置，其特征在于，所述装置包括：

提取模块，用于按照预设频次从多个数据源中提取数据结构不同的源数据，并将提取到的所述源数据作为异构多源数据；

处理模块，用于将所述异构多源数据加载至数据湖，并在所述数据湖中利用分布式处理组件对加载到的所述异构多源数据进行分层处理得到因子键值数据；

部署模块，用于将所述因子键值数据对应的因子服务部署至容器并暴露对应的调用接口，所述调用接口用于指示终端调取对应的需求因子数据。

9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。