[发明专利]一种互联网平台数据交互方法及装置在审
申请号: | 202011094376.5 | 申请日: | 2020-10-14 |
公开(公告)号: | CN112398906A | 公开(公告)日: | 2021-02-23 |
发明(设计)人: | 关天昊;夏其峰 | 申请(专利权)人: | 上海海典软件股份有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 杭州创信知识产权代理有限公司 33383 | 代理人: | 吴清珠 |
地址: | 201206 上海市浦东*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 互联网 平台 数据 交互 方法 装置 | ||
1.一种互联网平台数据交互方法,其特征在于,所述方法包括:
步骤101、接收用户的上传请求和上传数据,根据所述上传数据的目标数据源,从远程服务器端定位对应的数据处理服务,其中所述数据处理服务具有多个;
步骤102、将用户的上传数据得到数据流,对所述数据流设定大小为M1的滑动窗口,在所述滑动窗口上分割出多个大小为M2的子窗口;
步骤103、根据上传数据的数据属性对当前子窗口的数据块进行划分,得到初始化种群,计算所述当前子窗口中各所述数据块的支持度值,判断所述各数据块的支持度值是否大于阈值,如果是,将所述数据块添加到所述当前子窗口的有效集内;
步骤104、根据有效集内的数据块的数据规则集,将数据处理分解为面向所述数据处理服务的子处理请求,以及将所述数据规则集分解为对应于各所述个子处理请求的多个不相交的规则子集;
步骤105、所述子处理请求和对应的规则子集派发给对应的所述数据处理服务,各所述数据处理服务并行执行数据处理任务,分别得到临时数据处理结果;
步骤106、按照所述上传数据的数据结果项的要求,将所述临时数据处理结果组装成当前子窗口的最终数据处理结果;
步骤107、数据流流动和滑动窗口的迁移,接收流入的新数据,同时删除过期的旧数据,更新滑动窗口数据作为新的处理起点。
2.根据权利要求1所述的一种互联网平台数据交互方法,其特征在于,其中所述计算所述当前子窗口中各所述数据块的支持度值Ma的公式为:
其中,N为数据集中数据块的个数;Si为数据集中第i个数据块;q为查询点,由第一个数据块开始;D(Si,q)为数据块Si到查询点q的距离;R为正确的数据集中查询点q与离q最远的数据块之间的距离。
3.根据权利要求1所述的一种互联网平台数据交互方法,其特征在于,其中所述接收用户的上传请求包括:上传请求服从参数为的泊松过程,队列具有长度限制L,当队满时,新到的上传请求将会被云服务系统丢弃;局调度器对所述上传请求的解析时间和虚拟机对所述上传请求的服务时间分别服从和1/σ的指数分布;其中,、σ均大于1;所述全局调度器对上传请求的解析,把所述上传请求转化为虚拟机创建命令,当基础设施资源池中所有可用资源均已被占用时,虚拟机创建命令无法执行。
4.根据权利要求1所述的一种互联网平台数据交互方法,其特征在于,其中所述接收用户的上传数据包括数据写入:
客户端通过文件创建系统类的打开命令打开文件,相对应的所述文件创建系统类就会返回一个文件系统输出数据流给客户端;
所述客户端调用主节点的远程调用接口的取数据块地址命令,获得所述文件第一个数据块的保存地址;
调用所述文件系统输出数据流的读取命令读取文件数据;
所述文件系统输出数据流和数据节点建立连接,调用数据节点的读数据接口读取数据块;
当读取完该数据块后,如果文件尚未读取完,继续调用取数据块地址命令获得下一个数据块的地址;
所述文件系统输出数据流和存储所述数据块的数据节点进行通信,读取数据块内容;
重复上述读数据块过程,直到文件读取完毕,所述客户端调用关闭命令关闭数据流。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海海典软件股份有限公司,未经上海海典软件股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011094376.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种搬运机器人的专用夹具
- 下一篇:挤压瓶
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置