[发明专利]基于多源大数据的时空过程智能分析挖掘方法与系统在审
申请号: | 202211018917.5 | 申请日: | 2022-08-24 |
公开(公告)号: | CN115455076A | 公开(公告)日: | 2022-12-09 |
发明(设计)人: | 陈泽强;潘慧文;邹童旭;陈能成 | 申请(专利权)人: | 中国地质大学(武汉) |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/248;G06F16/29;G06F16/182;G06F9/50 |
代理公司: | 武汉知产时代知识产权代理有限公司 42238 | 代理人: | 魏波 |
地址: | 430000 湖*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 多源大 数据 时空 过程 智能 分析 挖掘 方法 系统 | ||
1.一种基于多源大数据的时空过程智能分析挖掘方法,其特征在于,包括以下步骤:
S1:访问普通用户界面,触发注册和登录后通过安全认证和授权访问管理员主界面;
其中,普通用户界面仅对时空过程产品进行查询和分析,管理员则可进行如下步骤;
S2:选择内置时空过程模型或上传新模型,提供模型参数配置和在线建模功能;
S3:依据多源大数据的上传、查询与分析结果,选择模型适用的多源数据集;
S4:根据时空过程模型和多源数据集,对时空过程分析挖掘任务进行分布式计算,获取实时计算状态;
S5:将计算得到的时空过程产品进行展示。
2.根据权利要求1所述的时空过程智能分析挖掘方法,其特征在于:S1的具体过程如下:
S1.1:客户端统一访问普通用户界面,该界面仅支持查看和分析现有的时空过程产品;
S1.2:触发登录选项后进入登录界面,输入用户名、密码和验证码,数据库验证通过后生成客户端的token令牌并进入管理员主界面,客户端访问除登录注册以外的其他功能时由服务器解析令牌并核实访问权限后才能触发;
S1.3:触发登录界面的注册选项跳转至注册界面,输入用户名和密码信息后跳转至登录界面,其中用户密码使用强哈希算法加密存储。
3.根据权利要求1所述的时空过程智能分析挖掘方法,其特征在于:S2所述的选择内置时空过程模型或上传新模型,提供模型在线建模、优化和敏感性分析功能;通过分布式文件管理系统存储模型算法,在多源数据库适配结果中存储模型功能信息、模型参数和存储路径;
模型文件通过网络处理服务发布共享以实现即插即用;
模型参数可在线修改。
4.根据权利要求1所述的时空过程智能分析挖掘方法,其特征在于:S3的具体过程如下:
S3.1:客户端上传新数据或选择现有数据,统一处理后存储在分布式管理系统中,客户端上传的新数据通过在线数据预处理后统一管理;
S3.2:客户端通过数据查看和数据分析,选择模型适用的多源数据集。
5.根据权利要求1所述的时空过程智能分析挖掘方法,其特征在于:S4的具体过程如下:
S4.1:在模型算法中添加增量学习模块,并将模型实例和优化器注入到分布式计算组件,添加gpu实时监控模块;
S4.2:通过命令执行器将参数配置和数据集路径传入模型并执行分布式计算,实时查看分布式计算状态,存储分布式计算得到的时空过程产品,将产品信息保存在数据库中。
6.根据权利要求1所述的时空过程智能分析挖掘方法,其特征在于:S5读取分布式计算得到的时空过程产品,根据产品特性进行二维或三维展示,并将产品展示在普通用户界面。
7.根据权利要求3所述的时空过程智能分析挖掘方法,其特征在于:数据存储和数据共享分别使用了多源数据库适配和网络处理服务;
其中,多源数据库适配包含关系数据库和非关系数据库,是通过客户端输入的数据库配置参数实现动态数据库适配方法,执行自动切换数据源的功能;切换客户端数据源是保障时空过程分析挖掘计算中生成的数据仅该用户可见,同时加快客户端数据源中独有数据的读写效率;此外,用户可通过上传数据或共享数据公开时空过程计算产品;
网络处理服务向客户端提供对预先编程的数据的封装方式,使其在网络环境中以服务的形式发布,在需要时进行通信以实现模型服务的共享。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国地质大学(武汉),未经中国地质大学(武汉)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211018917.5/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置