[发明专利]基于NSQ消息队列的文件导入方法、装置、设备及存储介质有效
申请号: | 201910241606.7 | 申请日: | 2019-03-28 |
公开(公告)号: | CN109947701B | 公开(公告)日: | 2023-08-29 |
发明(设计)人: | 张星亮;黄育源 | 申请(专利权)人: | 深圳市六度人和科技有限公司 |
主分类号: | G06F16/11 | 分类号: | G06F16/11;G06F16/182;G06F16/176 |
代理公司: | 深圳盛德大业知识产权代理事务所(普通合伙) 44333 | 代理人: | 贾振勇 |
地址: | 518000 广东省深圳市南山区粤*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 nsq 消息 队列 文件 导入 方法 装置 设备 存储 介质 | ||
1.一种基于NSQ消息队列的文件导入方法,其特征在于,所述方法包括以下步骤:
获取待导入文件;
检测所述待导入文件的大小,将所述待导入文件的大小与预先设置的文件大小阈值进行比较;
若所述待导入文件小于所述文件大小阈值,则将所述待导入文件加入到预先设置的第一NSQ消息队列;
若所述待导入文件大于所述文件大小阈值,则将所述待导入文件加入到预先设置的第二NSQ消息队列;
将所述第一NSQ消息队列以及所述第二NSQ消息队列中的待导入文件分别通过不同的话题通道同时进行导入;
获取所述待导入文件的客户信息;
将所述待导入文件的客户信息与客户信息数据库中的客户信息进行匹配,匹配成功则将所述待导入文件的客户信息与匹配成功的客户信息进行关联,匹配失败则在所述客户信息数据库中生成新的客户信息并将所述待导入文件的客户信息与生成的新客户信息进行关联。
2.如权利要求1所述的基于NSQ消息队列的文件导入方法,其特征在于,在所述若所述待导入文件小于所述文件大小阈值,则将所述待导入文件加入到预先设置的第一NSQ消息队列后,所述方法还包括:
对所述第一NSQ消息队列中的待导入文件进行导入;
实时记录所述第一NSQ消息队列中的待导入文件的第一导入结果,所述第一导入结果包括第一导入状态;
实时返回所述第一导入结果。
3.如权利要求1所述的基于NSQ消息队列的文件导入方法,其特征在于,在所述若所述待导入文件大于所述文件大小阈值,则将所述待导入文件加入到预先设置的第二NSQ消息队列后,所述方法还包括:
对所述第二NSQ消息队列中的待导入文件进行导入;
实时记录所述第二NSQ消息队列中的待导入文件的第二导入结果,所述第二导入结果包括第二导入状态及导入进度;
通过状态控制返回所述第二导入结果。
4.如权利要求1所述的基于NSQ消息队列的文件导入方法,其特征在于,所述方法还包括:
将所述第一NSQ消息队列或所述第二NSQ消息队列中已经导入的待导入文件的信息进行分布式锁处理。
5.如权利要求1所述的基于NSQ消息队列的文件导入方法,其特征在于,所述方法还包括:
获取所述待导入文件的跟进信息;
根据所述跟进信息,提取所述待导入文件的跟进人信息,将所述待导入文件关联到跟进信息库中对应跟进人信息中。
6.如权利要求1所述的基于NSQ消息队列的文件导入方法,其特征在于,所述将所述待导入文件的客户信息与客户信息数据库中的客户信息进行匹配的步骤包括:
提取所述待导入文件的客户信息中的关键词,得到待匹配关键词;
将所述待匹配关键词与所述客户信息数据库中预先设置的关键词进行匹配,其中,所述预先设置的关键词与所述客户信息数据库中的客户信息相对应。
7.一种基于NSQ消息队列的文件导入装置,其特征在于,所述装置包括:
获取模块,用于获取待导入文件;
比较模块,用于检测所述待导入文件的大小,将所述待导入文件的大小与预先设置的文件大小阈值进行比较;
第一添加模块,用于若所述待导入文件小于所述文件大小阈值,则将所述待导入文件加入到预先设置的第一NSQ消息队列;
第二添加模块,用于若所述待导入文件大于所述文件大小阈值,则将所述待导入文件加入到预先设置的第二NSQ消息队列;
导入模块,用于将所述第一NSQ消息队列以及所述第二NSQ消息队列中的待导入文件分别通过不同的话题通道同时进行导入;
客户获取模块,用于获取所述待导入文件的客户信息;
客户关联模块,用于将所述待导入文件的客户信息与客户信息数据库中的客户信息进行匹配,匹配成功则将所述待导入文件的客户信息与匹配成功的客户信息进行关联,匹配失败则在所述客户信息数据库中生成新的客户信息并将所述待导入文件的客户信息与生成的新客户信息进行关联。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市六度人和科技有限公司,未经深圳市六度人和科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910241606.7/1.html,转载请声明来源钻瓜专利网。