[发明专利]一种多源异构生态空间数据的集成方法在审
申请号: | 201910503881.1 | 申请日: | 2019-06-11 |
公开(公告)号: | CN110347734A | 公开(公告)日: | 2019-10-18 |
发明(设计)人: | 曾波;李川;周文浩 | 申请(专利权)人: | 重庆工商大学融智学院 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/28;G06F16/29 |
代理公司: | 北京卓恒知识产权代理事务所(特殊普通合伙) 11394 | 代理人: | 李迪 |
地址: | 401320 重庆*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 空间数据 经纬度坐标 多源异构 生态空间 录入 地球物理数据 空间数据采集 文件格式转换 信息技术领域 地理坐标系 数据正确性 一体化存储 一致性检查 存储效率 地质数据 关键字段 集成技术 空间参考 删除数据 属性数据 坐标换算 坐标体系 检查 数据源 转换 去重 图件 异构 煤矿 合并 保证 统一 | ||
1.一种多源异构生态空间数据的集成方法,其特征在于,包括以下步骤:
(1)空间数据采集:将空间数据、图件和属性数据,根据关键字段依次进行数据的录入和检查,保证录入数据的准确、可靠;
(2)空间数据的转换:在相同的空间参考基准下进行成图,将不同坐标体系下的坐标进行坐标换算转换为地理坐标系经纬度坐标;
(3)空间数据检查:包括去重、合并、删除数据经纬度坐标检查、文件格式转换等,以及数据正确性、完整性、一致性检查等;
(4)空间数据的集成:根据统一要求和标准汇集成数据信息。
2.根据权利要求1所述的一种多源异构生态空间数据的集成方法,所述步骤(1)中的空间数据采集,采集的多源异构空间数据为煤矿地质数据,包括坐标数据,文本数据,测井曲线图片数据。
3.根据权利要求1所述的一种多源异构生态空间数据的集成方法,所述步骤(1)中的空间数据数据采集,采用Everything软件开发工具包设计了数据发现模块,完成对文件系统的扫描与数据定位,包含全盘搜索、文件排序、获取路径等,通过主文件表扫描的形式对文件系统中的数据进行快速检索,同时占用较低的系统资源并实时跟踪文件变化,实现对地质空间数据的快速定位。
4.根据权利要求1所述的一种多源异构生态空间数据的集成方法,所述步骤(2)中空间数据的转换,其中坐标数据的数据转换采用的地理空间信息网格模型,建立两个曲面场之间点的对应关系,通过球面网格方案延伸到立体空间,用一系列空间网格体单元模拟地球空间系统,在每一个网格体单元内采用不同层次概念,每一层次的网格单元分辨率不同,每一层次的投影变换函数都是不同的,数学表达式为:X=F1,m,n,k(B,L,H),Y=F2,m,n,k(B,L,H);其中X,Y,Z是投影单元体内直角坐标;B,L,H是地球空间经纬度、高度地理坐标;F1、F2、F3是变换函数;m,n,k是行列高编码。
5.根据权利要求1所述的一种多源异构生态空间数据的集成方法,所述步骤(2)中空间数据的转换,其中文件的转换根据数据规范化标准对文件的数据进行转换,保证数据的格式统一,名称一致。
6.根据权利要求1所述的一种多源异构生态空间数据的集成方法,所述步骤(2)中空间数据的转换,其中测井曲线图片数据转换为将测井曲线的图片数据转化成结构化数据,采用神经网络对曲线进行识别追踪,快速精准地进行曲线的的纵向和横向网格化处理,以及按间隔读取并保存数据;在提取完测井曲线数据后,可以通过人工检验或反演校验的方式确保数据的准确性和规范性。
7.根据权利要求1所述的一种多源异构生态空间数据的集成方法,所述步骤(3)中数据检查,采用哈希算法对比,通过调用HashAlgorithm.Create方法创建一个HashAlgorithm对象,然后调用HashAlgorithm.ComputeHash方法,返回一个存储哈希码的字节数组,然后对字节数组转换为字符串类型;使用以上方法可以为每个文件生成一个独立的哈希码,若文件一致则哈希码一致,通过比较二个哈希码是否一致,进而可以判定数据内容是否相同;依据哈希算法最终完成内容检查、字段检查、清除重复数据、删除选中数据等操作。
8.根据权利要求1所述的一种多源异构生态空间数据的集成方法,所述步骤(4)中集成方法为采用Oracle与非结构化存储技术相结合的方式构建存储平台,结构化数据存入Oracle中,非结构化数据和半结构化数据存入分布式内存数据库HBase中,结合Spark并行处理技术对数据进行分析和加速。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆工商大学融智学院,未经重庆工商大学融智学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910503881.1/1.html,转载请声明来源钻瓜专利网。