[发明专利]一站式数据处理的方法、装置、存储介质及电子设备有效
申请号: | 202010392157.9 | 申请日: | 2020-05-11 |
公开(公告)号: | CN111581479B | 公开(公告)日: | 2021-04-13 |
发明(设计)人: | 刘震 | 申请(专利权)人: | 北京精准沟通传媒科技股份有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F16/9535 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 柳欣 |
地址: | 100190 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一站式 数据处理 方法 装置 存储 介质 电子设备 | ||
1.一种一站式数据处理的方法,其特征在于,包括:
获取不同数据源的多个车辆数据,对多个所述车辆数据进行关系映射,确定不同数据源的统一映射对应关系;
根据所述统一映射对应关系对多个所述车辆数据进行统计分析,确定车辆的销量数据,并确定所述车辆的评价标签;
根据所述评价标签生成所述车辆的车辆画像信息;
其中,所述对多个所述车辆数据进行关系映射,确定不同数据源的统一映射对应关系,包括:
分别确定不同所述数据源的车辆数据中的关键字,所述关键字包括车辆关键字和/或评价关键字;
将不同数据源的不同关键字作为搜索关键词,若不同的关键字基于搜索引擎所定位到的链接相同,确定不同的关键字之间存在关联,并基于笛卡尔积对所述车辆数据中的关键字进行关系映射,生成所述关键字的统一映射对应关系。
2.根据权利要求1所述的方法,其特征在于,所述获取不同数据源的多个车辆数据包括:
基于不同爬取方式分别对所述数据源进行爬取处理,爬取所述数据源的车辆数据,所述车辆数据包括车辆销售数据、车辆曝光数据、车辆点击数据、车辆搜索数据、车辆评论数据中的一项或多项,所述爬取方式用于爬取所述车辆数据中的一项数据。
3.根据权利要求1所述的方法,其特征在于,所述确定所述车辆的评价标签包括:
对所述车辆数据进行句法依存处理,提取出所述车辆的评价标签。
4.根据权利要求1所述的方法,其特征在于,根据所述评价标签生成所述车辆的车辆画像信息包括:
预先确定层级化的评价参数,并确定与所述车辆的最底层评价参数相对应的评价标签;
对与所述最底层评价参数相对应的所有所述评价标签进行统计处理,将数量最多的评价标签作为所述最底层评价参数的有效评价标签,并根据所述车辆的所有最底层评价参数的有效评价标签生成所述车辆的车辆画像信息。
5.根据权利要求1所述的方法,其特征在于,在所述确定不同数据源的统一映射对应关系之后,还包括:
根据所述统一映射对应关系对多个所述车辆数据进行统计分析,确定车辆的指数信息;其中,车辆数据包括车辆曝光数据、车辆点击数据、车辆搜索数据、车辆评论数据中的一项或多项,所述指数信息相应地包括曝光指数、活跃指数、搜索指数、关注指数中的一项或多项。
6.根据权利要求1所述的方法,其特征在于,还包括:
在所述数据源发生数据更新时,获取更新后的新增车辆数据;
根据所述新增车辆数据实时对所述车辆的销量数据和所述车辆的车辆画像信息进行更新。
7.一种一站式数据处理的装置,其特征在于,包括:
关系映射模块,用于获取不同数据源的多个车辆数据,对多个所述车辆数据进行关系映射,确定不同数据源的统一映射对应关系;
统计分析模块,用于根据所述统一映射对应关系对多个所述车辆数据进行统计分析,确定车辆的销量数据,并确定所述车辆的评价标签;
画像模块,用于根据所述评价标签生成所述车辆的车辆画像信息;
其中,所述关系映射模块对多个所述车辆数据进行关系映射,确定不同数据源的统一映射对应关系,包括:
分别确定不同所述数据源的车辆数据中的关键字,所述关键字包括车辆关键字和/或评价关键字;
将不同数据源的不同关键字作为搜索关键词,若不同的关键字基于搜索引擎所定位到的链接相同,确定不同的关键字之间存在关联,并基于笛卡尔积对所述车辆数据中的关键字进行关系映射,生成所述关键字的统一映射对应关系。
8.一种计算机存储介质,其特征在于,所述计算机存储介质存储有计算机可执行指令,所述计算机可执行指令用于执行权利要求1-6任意一项所述的一站式数据处理的方法。
9.一种电子设备,其特征在于,包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-6任意一项所述的一站式数据处理的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京精准沟通传媒科技股份有限公司,未经北京精准沟通传媒科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010392157.9/1.html,转载请声明来源钻瓜专利网。