[发明专利]多源异构数据源融合计算方法、系统、设备和存储介质在审
申请号: | 201911278206.X | 申请日: | 2019-12-11 |
公开(公告)号: | CN111046245A | 公开(公告)日: | 2020-04-21 |
发明(设计)人: | 邱炜伟;尹可挺;匡立中;李伟;孙飞宇 | 申请(专利权)人: | 杭州趣链科技有限公司 |
主分类号: | G06F16/901 | 分类号: | G06F16/901;G06F16/906;G06F9/455 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 310051 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 多源异构 数据源 融合 计算方法 系统 设备 存储 介质 | ||
本发明提供一种多源异构数据源融合计算方法、系统、设备和存储介质,包括:接收第一用户终端发送的数据请求信息,其中,所述数据请求信息为第一用户终端提供的可编程范式;根据所述可编程范式生成对应的虚拟机的应用;虚拟机根据所述令牌生成所述虚拟机可识别的第一脚本,通过所述第一脚本获取第一数据集,并将所述第一数据集转化为所述计算平台可识别的第二数据集;将所述第二数据集转化为所述第一用户终端可识别的第三数据集。本发明通过计算平台的虚拟机执行计算融合操作,可以节省异构数据源转为同构数据是带来的空间问题,同时还能够保留异构数据源自身的特性,消除用户对不同数据源的差异感知,无差别的操作不同数据源达到融合计算。
技术领域
本申请涉及信息技术领域,具体涉及一种多源异构数据源融合计算方法、系统、设备和存储介质。
背景技术
在计算机信息技术中经常涉及到向异构数据源中获取相关数据的场景,现有技术中,通常是将需要请求的数据先获取过来,然后遍历该数据并按照自己的格式重新构建改数据。由于不同数据源的结构不同,导致数据重构的过程中数据格式会重新设计。这种处理的方式一方面浪费时间和存储空间,另一方面转化的时候会丢失原有数据的特性,且同化过程较为繁琐,很容易出现数据错误,如果向保留原有特性则需要重新设计数据结构,一方面比较耗时,另一方面会带来大量的数据存储冗余。
发明内容
鉴于现有技术中的上述缺陷或不足,期望提供一种节省时间和空间且保持数据特性完整的多源异构数据源融合计算方法、系统、设备和存储介质。
第一方面,本发明提供一种多源异构数据源融合计算方法,包括:
接收第一用户终端发送的数据请求信息,其中,所述数据请求信息为第一用户终端提供的可编程范式;
根据所述可编程范式生成对应的虚拟机的应用,验证所述可编程范式的形式是否正确,是,则将所述数据请求信息发送至第二用户终端以供所述第二用户终端检查数据请求内容通过后发送令牌至计算平台;
虚拟机根据所述令牌生成所述虚拟机可识别的第一脚本,通过所述第一脚本获取第一数据集,并将所述第一数据集转化为所述计算平台可识别的第二数据集;
将所述第二数据集转化为所述第一用户终端可识别的第三数据集。
进一步,将所述数据请求信息发送至第二用户终端以供所述第二用户终端检查数据请求内容通过后发送令牌至计算平台时还包括:
将检查数据请求信息通过的结果反馈至第一用户终端。
进一步,所述第一用户终端可识别的第三数据集的格式记录在所述可编程范式中。
进一步,所述第一用户终端可识别的第三数据集的格式在计算平台收到所述令牌后向所述第一用户终端发送询问信息获取。
进一步,所述第一用户终端收到第二用户终端发送的检查通过的结果后,在设定的时间内发送第一用户终端所需要的数据格式以供所述计算平台转化成所述数据格式,若超出设定的时间计算平台未收到所述数据格式则计算平台将默认第三数据集的格式为第一用户终端注册时的格式,其中,所述将默认第三数据集的格式在第一用户终端在计算平台上注册的时候有所记录
第二方面,本发明提供一种多源异构数据源融合计算系统,包括:
数据源访问单元和数据源处理单元。其中,
数据源访问单元用于根据第一用户终端提供的可编程范式,生成对应的虚拟机应用,然后通过第一用户终端选择的若干数据源行为,虚拟机根据各所述数据源行为对应的各行为准则生成各对应数据源的执行程序,以访问各对应的数据源。
数据源处理单元用于接收各数据源的响应结果,并根据所述响应结果执行对应的操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州趣链科技有限公司,未经杭州趣链科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911278206.X/2.html,转载请声明来源钻瓜专利网。