[发明专利]一种多数据源采集配置方法及装置在审
申请号: | 201711410383.X | 申请日: | 2017-12-21 |
公开(公告)号: | CN108133017A | 公开(公告)日: | 2018-06-08 |
发明(设计)人: | 杨锐恒;李俊 | 申请(专利权)人: | 广州市申迪计算机系统有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F3/06 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫 |
地址: | 510000 广东省广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种多数据源采集配置方法及装置,涉及数据自动化采集领域。用以解决现有的数据采集流程效率低,且操作方式单一的问题。包括:根据数据源配置入口获取到的配置信息,确定数据源在服务器内的存储路径,根据展示数据源阈值以及数据源在存储路径的起始位置,确定获取第一数据源;根据数据格式化命令对第一数据源进行格式化,根据字段重命名命令对第二数据源包括的多个字段进行重命名,并对多个重命名的字段进行字段类型识别;根据数据源命名命令,对第二数据源进行重命名,得到第三数据源,并根据存储方式命令设置第三数据源对应的存储路径;将配置文件发送至数据采集进程,以使数据采集进程根据配置文件进行数据采集。 | ||
搜索关键词: | 数据源 存储路径 数据采集 字段 第一数据 多数据源 采集 配置文件发送 数据采集流程 格式化 数据格式化 数据源配置 数据自动化 存储方式 命令设置 配置文件 配置信息 展示数据 字段类型 配置 服务器 进程 | ||
【主权项】:
一种多数据源采集配置方法,其特征在于,包括:根据数据源配置入口获取到的配置信息,确定与所述配置信息对应的数据源在服务器内的存储路径以及所述数据源在所述存储路径的起始位置;根据展示数据源阈值以及所述数据源在所述存储路径的起始位置,确定获取第一数据源;根据接收到数据格式化命令对所述第一数据源进行格式化,得到第二数据源;根据接收到的字段重命名命令对所述第二数据源包括的多个字段进行重命名,并对多个重命名的所述字段进行字段类型识别;根据数据源命名命令,对所述第二数据源进行重命名,得到第三数据源,并根据接收到存储方式命令设置所述第三数据源对应的存储路径;将所述配置信息,所述展示数据源阈值,所述数据格式化命令,所述字段重命名命令,所述数据源命名命令和所述存储方式命令按照格式拼接成配置文件,将所述配置文件发送至数据采集进程,以使所述数据采集进程根据所述配置文件进行数据采集。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州市申迪计算机系统有限公司,未经广州市申迪计算机系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711410383.X/,转载请声明来源钻瓜专利网。
- 上一篇:一种办公用文档定位系统及方法
- 下一篇:一种基于关联聚合的数据取证推荐方法