[发明专利]基于Hadoop平台的海量图片的快速检索方法在审
申请号: | 201510908363.X | 申请日: | 2015-12-08 |
公开(公告)号: | CN106855872A | 公开(公告)日: | 2017-06-16 |
发明(设计)人: | 孙玉林;徐宝华;贾春朴;张福元;陈守森 | 申请(专利权)人: | 山东商务职业学院 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 264670 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及计算机大数据处理领域,具体是基于Hadoop平台的海量图片的快速检索方法。步骤1、搭建Hadoop集群平台;步骤2、设置安全策略;步骤3、单图片存储处理;步骤4、文件预处理合并;步骤5建立图片索引;步骤6、客户端以图片名称和创建时间为参数发起访问请求,NameNode运算获取图片所在分钟时间段和合并文件对应的Blocks信息,返回给客户端。本发明可以很好的解决Hadoop检索海量图片时NameNode内存消耗过度和检索效率低下的问题,并有效降低了检索时的NameNode负载,实现了对NameNode性能的提升,从而推动hadoop平台更广泛的应用。 | ||
搜索关键词: | 基于 hadoop 平台 海量 图片 快速 检索 方法 | ||
【主权项】:
搭建Hadoop集群平台:每台计算机安装操作系统和Hadoop软件,将一台计算机配置成NameNode,其它计算机配置成DataNodes;各个机器通过SSH直接通信;NameNode负责的是整个存储层的管理,DataNode主要作为存储节点;验证DataNode和NameNode之间联通性是通过心跳检测来实现,并且DataNode还要定期将自己的存储区信息发送给NameNode;当客户端访问时,首先访问NameNode,NameNode会分配相应的空间,在得到相应的空间后开始各个作业。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东商务职业学院,未经山东商务职业学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201510908363.X/,转载请声明来源钻瓜专利网。
- 上一篇:一种数据迁移的方法和装置
- 下一篇:网络问答系统、方法与计算机可读取记录媒体