[发明专利]基于多元数据和原子化算法的智能分析方法和系统在审
申请号: | 202211694067.0 | 申请日: | 2022-12-28 |
公开(公告)号: | CN116383442A | 公开(公告)日: | 2023-07-04 |
发明(设计)人: | 倪梦珺;苗仲辰;高剑;鲁继东;林越峰;马鸿超;董真豪;江航;杨熠 | 申请(专利权)人: | 上海金融期货信息技术有限公司 |
主分类号: | G06F16/901 | 分类号: | G06F16/901;G06F16/904;G06F16/906;G06F16/27;G06F16/215;G06F16/182 |
代理公司: | 上海专利商标事务所有限公司 31100 | 代理人: | 施浩 |
地址: | 200122 上海市浦东新区*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 多元 数据 原子 算法 智能 分析 方法 系统 | ||
1.一种基于多元数据和原子化算法的智能分析方法,其特征在于,方法包括:
步骤1:接收海量的多元数据并进行加工处理;
步骤2:基于加工处理后的多元数据,处理后形成垂直领域的图节点和实体关系对,图节点和实体关系对融合为异构图数据后存入图数据库中;
步骤3:基于多个原子化的算法模块,对异构图数据进行处理;
步骤4:基于原子化的算法模块工作流处理后的数据,基于通用分析方式生成分析报告。
2.根据权利要求1所述的基于多元数据和原子化算法的智能分析方法,其特征在于,在步骤1中,接收到的数据包括行情数据和文本数据两类,其中对于文本数据还进行加工处理,加工处理包括数据去重、数据去噪、数据清洗、信息提取和数据过滤在内的操作,加工处理后的数据通过HDFS上的kafka消费,再存储至ES集群。
3.根据权利要求1所述的基于多元数据和原子化算法的智能分析方法,其特征在于,在步骤2中,形成垂直领域的图节点和实体关系对之前的处理包括:实体识别、实体链接、实体消歧、三元组抽取。
4.根据权利要求1所述的基于多元数据和原子化算法的智能分析方法,其特征在于,在步骤3中,算法模块是单独封装的,且设置通用的输入输出接口,多个原子化的算法模块进行动态的组合配置以实现定制化的需求。
5.根据权利要求4所述的基于多元数据和原子化算法的智能分析方法,其特征在于,在步骤3中,原子化的算法模块对异构图数据的处理是并行化的处理,其中并行化处理的调用路径是动态调节的。
6.根据权利要求1所述的基于多元数据和原子化算法的智能分析方法,其特征在于,步骤4中是一个通用分析方式进行单独分析,或是多个通用分析方式搭配在一起的组合分析。
7.根据权利要求1所述的基于多元数据和原子化算法的智能分析方法,其特征在于,方法还包括:
步骤5:实现低代码的智能分析报告组合。
8.一种基于多元数据和原子化算法的智能分析系统,其特征在于,系统包括:
接收模块,配置为接收海量的多元数据并进行加工处理;
异构处理模块,配置为基于加工处理后的多元数据,处理后形成垂直领域的图节点和实体关系对,图节点和实体关系对融合为异构图数据后存入图数据库中;
原子化算法处理模块,配置为基于多个原子化的算法模块,对异构图数据进行处理;
分析报告模块,配置为基于原子化的算法模块工作流处理后的数据,基于通用分析方式生成分析报告。
9.根据权利要求8所述的基于多元数据和原子化算法的智能分析系统,其特征在于,在接收模块中,接收到的数据包括行情数据和文本数据两类,其中对于文本数据还进行加工处理,加工处理包括数据去重、数据去噪、数据清洗、信息提取和数据过滤在内的操作,加工处理后的数据通过HDFS上的kafka消费,再存储至ES集群。
10.根据权利要求8所述的基于多元数据和原子化算法的智能分析系统,其特征在于,在异构处理模块中,形成垂直领域的图节点和实体关系对之前的处理包括:实体识别、实体链接、实体消歧、三元组抽取。
11.根据权利要求8所述的基于多元数据和原子化算法的智能分析系统,其特征在于,在原子化算法处理模块中,原子化的算法模块是单独封装的,且设置通用的输入输出接口,多个原子化的算法模块进行动态的组合配置以实现定制化的需求。
12.根据权利要求11所述的基于多元数据和原子化算法的智能分析系统,其特征在于,在原子化算法处理模块中,原子化的算法模块对异构图数据的处理是并行化的处理,其中并行化处理的调用路径是动态调节的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海金融期货信息技术有限公司,未经上海金融期货信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211694067.0/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置