[发明专利]一种分布式海量多媒体图片智能分析方法及装置在审
申请号: | 202111392149.5 | 申请日: | 2021-11-19 |
公开(公告)号: | CN114048336A | 公开(公告)日: | 2022-02-15 |
发明(设计)人: | 袁泉;林淑强;翟永强;陈涛涛;林劼;张永光 | 申请(专利权)人: | 厦门市美亚柏科信息股份有限公司 |
主分类号: | G06F16/45 | 分类号: | G06F16/45;G06F16/27;G06F40/30;G06N3/04;G06N3/08;G06V10/22 |
代理公司: | 厦门福贝知识产权代理事务所(普通合伙) 35235 | 代理人: | 郭涵炜 |
地址: | 361000 福建省厦门市思明*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 海量 多媒体 图片 智能 分析 方法 装置 | ||
1.一种分布式海量多媒体图片智能分析方法,其特征在于,该方法包括:
预处理步骤,应用系统把获取到的多媒体图片存储在kafka图片待处理队列;
智能分析步骤,将N+1个计算设备构成分布式处理系统,在每个计算设备上部署的图片智能解析引擎,每个图片智能解析引擎分别从kafka图片待处理队列中获取待处理图片进行智能处理得到处理结果,并将图片的处理结果存储至kafka图片已处理队列;
获取步骤,所述应用系统从kafka图片已处理队列获取所述处理结果,并根据所述处理结果对图片进行处理。
2.根据权利要求1所述的方法,其特征在于,所述每个图片智能解析引擎分别从kafka图片待处理队列中获取待处理图片进行智能处理得到处理结果的操作为:将所述待处理图片Fileimg输入到已训练的第一神经网络模型,提取图片特征,通过分类器,输出图片分类标签Tagimg和该分类类别的置信度Pimg。
3.根据权利要求2所述的方法,其特征在于,对所述待处理图片进行OCR识别得到图片文本内容text;将text输入到已训练的第二神经网络模型,提取文本语义特征,通过文本分类器,输出文本语义标签Tagtext和该分类类别置信度Ptext。
4.根据权利要求3所述的方法,其特征在于,按预定融合策略,将图片分类标签Tagimg和文本语义分类标签Tagtext互相验证及融合,输出所述图片的最终类型标签Tag。
5.根据权利要求4所述的方法,其特征在于,所述预定融合策略为:
设两个阈值参数εimg和εhtml;
如果Tagimg=Taghtml,则最终类型标签Tag=Tagimg=Taghtml;
如果Tagimg≠Taghtml:
如果Tagimg≥εimgand Taghtml≤εhtml,则Tag=Tagimg;
如果Tagimg<εimgand Taghtml≥εhtml,则Tag=Taghtml;
如果Tagimg≥εimgand Taghtml≥εhtml,则Tag=Tagimg。
6.一种分布式海量多媒体图片智能分析装置,其特征在于,该装置包括:
预处理单元,应用系统把获取到的多媒体图片存储在kafka图片待处理队列;
智能分析单元,将N+1个计算设备构成分布式处理系统,在每个计算设备上部署的图片智能解析引擎,每个图片智能解析引擎分别从kafka图片待处理队列中获取待处理图片进行智能处理得到处理结果,并将图片的处理结果存储至kafka图片已处理队列;
获取单元,所述应用系统从kafka图片已处理队列获取所述处理结果,并根据所述处理结果对图片进行处理。
7.根据权利要求6所述的装置,其特征在于,所述每个图片智能解析引擎分别从kafka图片待处理队列中获取待处理图片进行智能处理得到处理结果的操作为:将所述待处理图片Fileimg输入到已训练的第一神经网络模型,提取图片特征,通过分类器,输出图片分类标签Tagimg和该分类类别的置信度Pimg。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于厦门市美亚柏科信息股份有限公司,未经厦门市美亚柏科信息股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111392149.5/1.html,转载请声明来源钻瓜专利网。