[发明专利]一种基于FPGA的金融大数据采集处理装置及系统在审
| 申请号： | 201711203673.7 | 申请日： | 2017-11-27 |
| 公开（公告）号： | CN109840844A | 公开（公告）日： | 2019-06-04 |
| 发明（设计）人： | 方逸洲;李宝伟 | 申请（专利权）人： | 上海仪电（集团）有限公司中央研究院 |
| 主分类号： | G06Q40/04 | 分类号： | G06Q40/04 |
| 代理公司： | 上海科盛知识产权代理有限公司 31225 | 代理人： | 翁惠瑜 |
| 地址： | 200233 上海*** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及一种基于FPGA的金融大数据采集处理装置及系统，所述金融大数据采集处理装置包括FPGA板卡和存储器，所述FPGA板卡包括：控制中心，接收采集命令，并对采集数据进行处理；下载模块，响应控制中心的下载指令，进行页面下载；抽取模块，响应控制中心的抽取指令，对所述下载结果进行抽取；清洗模块，响应控制中心的清洗指令，对所述抽取结果进行清洗，根据所述清洗结果形成最终的采集数据，并将采集数据存入存储器；资源模块，存储有下载所需的资源；URL消重模块，响应控制中心的消重指令，基于清洗结果对所述资源模块存储的资源进行URL消重。与现有技术相比，本发明具有加速金融数据采集、提升数据价值等优点。 | ||
| 搜索关键词： | 响应控制 采集处理装置 采集数据 清洗 大数据 抽取 存储器 资源模块 指令 下载 存储 金融 采集命令 抽取模块 金融数据 控制中心 清洗模块 下载模块 下载指令 页面下载 采集 | ||
【主权项】：
1.一种基于FPGA的金融大数据采集处理装置，其特征在于，包括FPGA板卡和存储器，所述FPGA板卡包括：控制中心，接收采集命令，并对采集数据进行处理；下载模块，与所述控制中心连接，响应控制中心的下载指令，进行页面下载，并将下载结果反馈给控制中心；抽取模块，与所述控制中心连接，响应控制中心的抽取指令，对所述下载结果进行抽取，并将抽取结果反馈给控制中心；清洗模块，与所述控制中心连接，响应控制中心的清洗指令，对所述抽取结果进行清洗，并将清洗结果反馈给控制中心，根据所述清洗结果形成最终的采集数据，并将采集数据存入存储器；资源模块，与所述控制中心连接，存储有下载所需的资源；URL消重模块，与所述控制中心连接，响应控制中心的消重指令，基于清洗结果对所述资源模块存储的资源进行URL消重。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于上海仪电（集团）有限公司中央研究院，未经上海仪电（集团）有限公司中央研究院许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201711203673.7/，转载请声明来源钻瓜专利网。
- 上一篇：基于相似性合并的连续型特征自动分箱算法
- 下一篇：通信结算方法
