[发明专利]一种数据流关联方法、装置、电子设备及存储介质有效
申请号: | 201910439751.6 | 申请日: | 2019-05-24 |
公开(公告)号: | CN110209700B | 公开(公告)日: | 2021-11-26 |
发明(设计)人: | 蒋戈 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/242;G06F16/25 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 丁芸;项京 |
地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据流 关联 方法 装置 电子设备 存储 介质 | ||
1.一种数据流关联方法,其特征在于,所述方法包括:
获取数据流关联指令,其中,所述数据流关联指令包含各待关联数据流的输入源、输出源及关联条件;所述关联条件包括各所述待关联数据流的关联时间范围;
解析所述数据流关联指令,得到数据流关联信息,所述数据流关联信息包含各所述待关联数据流的输入源、输出源及关联条件;所述输入源包括各所述待关联数据流的存储地址、标识;所述输出源包括关联分析结果的存储位置;
按照各所述待关联数据流的输入源、输出源及关联条件,配置Flink SQL框架;
通过配置后的Flink SQL框架,获取各所述待关联数据流,并按照配置后的Flink SQL框架的所述关联条件,关联分析各所述待关联数据流,得到关联分析结果。
2.根据权利要求1所述的方法,其特征在于,所述关联条件还包括各所述待关联数据流的关联字段。
3.根据权利要求2所述的方法,其特征在于,所述通过配置后的Flink SQL框架,获取各所述待关联数据流,并按照配置后的Flink SQL框架的所述关联条件,关联分析各所述待关联数据流,得到关联分析结果,包括:
按照各所述待关联数据流的存储地址及标识,获取各所述待关联数据流;
按照各所述待关联数据流的关联字段,关联分析各所述待关联数据流,得到包含各所述待关联数据流中各字段的关联分析结果。
4.根据权利要求2所述的方法,其特征在于,所述关联条件还包括预设字段;所述通过配置后的Flink SQL框架,获取各所述待关联数据流,并按照配置后的Flink SQL框架的所述关联条件,关联分析各所述待关联数据流,得到关联分析结果,包括:
按照各所述待关联数据流的存储地址及标识,获取各所述待关联数据流;
按照各所述待关联数据流的关联字段及所述预设字段,关联分析各所述待关联数据流,得到至少包含所述预设字段的关联分析结果。
5.一种数据关联装置,其特征在于,所述装置包括:
数据流关联指令获取模块,用于获取数据流关联指令,其中,所述数据流关联指令包含各待关联数据流的输入源、输出源及关联条件;所述关联条件包括各所述待关联数据流的关联时间范围;
数据流关联指令解析模块,用于解析所述数据流关联指令,得到数据流关联信息,所述数据流关联信息包含各所述待关联数据流的输入源、输出源及关联条件;所述输入源包括各所述待关联数据流的存储地址、标识;所述输出源包括所述关联分析结果的存储位置;
Flink SQL框架配置模块,用于按照各所述待关联数据流的输入源、输出源及关联条件,配置Flink SQL框架;
关联分析结果确定模块,用于通过配置后的Flink SQL框架,获取各所述待关联数据流,并按照配置后的Flink SQL框架的所述关联条件,关联分析各所述待关联数据流,得到关联分析结果。
6.根据权利要求5所述的装置,其特征在于,所述关联条件还包括各所述待关联数据流的关联字段。
7.根据权利要求6所述的装置,其特征在于,所述关联分析结果确定模块,包括:
第一待关联数据流获取子模块,用于按照各所述待关联数据流的存储地址及标识,获取各所述待关联数据流;
第一关联分析结果确定子模块,用于按照各所述待关联数据流的关联字段,关联分析各所述待关联数据流,得到包含各所述待关联数据流中各字段的关联分析结果。
8.根据权利要求6所述的装置,其特征在于,所述关联条件还包括预设字段;所述关联分析结果确定模块,包括:
第二待关联数据流获取子模块,用于按照各所述待关联数据流的存储地址及标识,获取各所述待关联数据流;
第二关联分析结果确定子模块,用于按照各所述待关联数据流的关联字段及所述预设字段,关联分析各所述待关联数据流,得到至少包含所述预设字段的关联分析结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910439751.6/1.html,转载请声明来源钻瓜专利网。