[发明专利]一种数据处理方法、系统、存储介质及电子设备在审
申请号: | 202110935088.6 | 申请日: | 2021-08-16 |
公开(公告)号: | CN115705332A | 公开(公告)日: | 2023-02-17 |
发明(设计)人: | 范东来 | 申请(专利权)人: | 网银在线(北京)科技有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/2455;G06F16/27 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 钱娜 |
地址: | 100089 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 系统 存储 介质 电子设备 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
对获取到的原始数据进行转换,得到内置标签数据,所述原始数据由数据仓库中的表构成,所述内置标签数据由所述原始数据转换成包含用户属性的表构成;
采用类MapReduce模型的计算框架,对所述内置标签数据和获取到的用户自定义的外置标签数据进行标签位图处理操作,得到人群位图。
2.根据权利要求1所述的方法,其特征在于,所述对获取到的原始数据进行转换,得到内置标签数据,包括:
通过预设转换脚本,对获取到的原始数据进行转换,得到内置标签数据。
3.根据权利要求1所述的方法,其特征在于,获取用户自定义的外置标签数据的过程,包括:
通过预设计算框架,获取用户自定义的外置标签数据。
4.根据权利要求1所述的方法,其特征在于,采用类MapReduce模型的计算框架,对所述内置标签数据和获取到的用户自定义的外置标签数据进行标签位图处理操作,得到人群位图,包括:
对类MapReduce模型的计算框架创建第一类扩展和第二类扩展;
通过预设的SQL语言和所述第一类扩展,对所述内置标签数据和获取到的用户自定义的外置标签数据进行位图构建,得到待处理位图;
通过预设的SQL语言和所述第二类扩展,对所述待处理位图进行位运算,得到人群位图。
5.一种数据处理系统,其特征在于,所述系统包括:
转换单元,用于对获取到的原始数据进行转换,得到内置标签数据,所述原始数据由数据仓库中的表构成,所述内置标签数据由所述原始数据转换成包含用户属性的表构成;
处理单元,采用类MapReduce模型的计算框架,对所述内置标签数据和获取到的用户自定义的外置标签数据进行标签位图处理操作,得到人群位图。
6.根据权利要求5所述的系统,其特征在于,所述转换单元,具体用于:
通过预设转换脚本,对获取到的原始数据进行转换,得到内置标签数据。
7.根据权利要求5所述的系统,其特征在于,所述获取用户自定义的外置标签数据的过程的所述处理单元,具体用于:
通过预设计算框架,获取用户自定义的外置标签数据。
8.根据权利要求5所述的系统,其特征在于,所述处理单元,包括:
创建模块,用于对类MapReduce模型的计算框架创建第一类扩展和第二类扩展;
构建模块,用于通过预设的SQL语言和所述第一类扩展,对所述内置标签数据和获取到的用户自定义的外置标签数据进行位图构建,得到待处理位图;
计算模块,用于通过预设的SQL语言和所述第二类扩展,对所述待处理位图进行位运算,得到人群位图。
9.一种存储介质,其特征在于,所述存储介质包括存储的指令,其中,在所述指令运行时控制所述存储介质所在的设备执行如权利要求1至4任意一项所述的数据处理方法。
10.一种电子设备,其特征在于,包括存储器,以及一个或者一个以上的指令,其中一个或者一个以上指令存储于存储器中,且经配置以由一个或者一个以上处理器执行如权利要求1至4任意一项所述的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网银在线(北京)科技有限公司,未经网银在线(北京)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110935088.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:无配重悬挂架
- 下一篇:一种羊栖菜发酵混合物及其制备方法和应用