[发明专利]绘本识别方法、终端设备及计算机可读存储介质在审
申请号: | 201911359256.0 | 申请日: | 2019-12-25 |
公开(公告)号: | CN111191067A | 公开(公告)日: | 2020-05-22 |
发明(设计)人: | 李扬;顾景;王玥;程骏;庞建新;熊友军 | 申请(专利权)人: | 深圳市优必选科技股份有限公司 |
主分类号: | G06F16/583 | 分类号: | G06F16/583;G06F16/53 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 李莉 |
地址: | 518000 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 识别 方法 终端设备 计算机 可读 存储 介质 | ||
1.一种绘本识别方法,其特征在于,所述方法包括:
获取待识别绘本页面的待识别图像;
对所述待识别图像上的多个图像区域进行特征提取,以获得多个待匹配特征;
将所述多个待匹配特征分别与样本特征数据库中的多个样本特征进行相似度匹配,其中所述多个样本特征划分成多个类别,每个所述类别下的所述样本特征为对同一样本绘本页面的多个样本图像进行特征提取获得的;
为每个所述待匹配特征选择预定数量的相似度最高的样本特征,以作为匹配样本;
根据所述匹配样本所属的所述类别确定最佳匹配类别。
2.根据权利要求1所述的方法,其特征在于,所述对所述待识别图像上的多个图像区域进行特征提取的步骤包括:
从所述待识别图像的整体图像区域以及以所述整体图像区域的顶角为起点,从所述整体图像区域截取出的局部图像区域进行特征提取。
3.根据权利要求1所述的方法,其特征在于,所述根据所选择的所述样本特征所属的所述类别确定最佳匹配类别的步骤包括:
针对每个所述待匹配特征,确定包含所述匹配样本最多的所述类别作为候选匹配类别;
若所述多个待匹配特征的所述候选匹配类别为同一类别的数量大于预设的数量阈值,且各所述待匹配特征与对应的匹配样本之间的特征距离大于预设的距离阈值,则将所述同一类别作为所述最佳匹配类别。
4.根据权利要求1所述的方法,其特征在于,所述获取待识别绘本页面的待识别图像的步骤之前,进一步包括:
获取样本绘本页面的样本图像,其中每个所述样本绘本页面分别对应多个样本图像;
利用预先训练好的特征提取模型对所述样本图像进行特征提取,以获得所述样本特征;
将对应于同一所述样本绘本页面的多个所述样本特征划分到同一所述类别,以形成所述样本特征库。
5.根据权利要求4所述的方法,其特征在于,所述利用预先训练好的特征提取模型对所述样本图像进行特征提取,以获得所述样本特征的步骤包括:
获取多个训练绘本页面的多个训练图像;
利用所述训练图像对所述特征提取模型进行训练,以使得所述特征提取模型针对同一所述训练绘本页面所提取的特征之间的特征距离最小化,针对不同的所述训练绘本页面所提取的特征之间的特征距离最大化。
6.根据权利要求5所述的方法,其特征在于,所述利用所述训练图像对所述特征提取模型进行训练的步骤包括:
利用所述训练图像通过siamese网络对所述特征提取模型进行训练。
7.根据权利要求5所述的方法,其特征在于,所述对所述待识别图像上的多个图像区域进行特征提取的步骤包括:
利用所述特征提取模型对所述待识别图像上的多个图像区域进行特征提取。
8.根据权利要求1所述的方法,其特征在于,所述图像区域的数量不小于3,且所述图像区域与所述待识别图像的面积比不小于50%,所述预定数量不小于20。
9.一种终端设备,其特征在于,所述终端设备包括:处理器和与所述处理器电连接的存储器,所述存储器用于存储程序数据,所述处理器用于执行所述程序数据以实现如权利要求1-8任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储程序数据,所述程序数据在被处理器执行时,用以实现如权利要求1-8任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市优必选科技股份有限公司,未经深圳市优必选科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911359256.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:自动化样本关键点标注方法、装置及系统
- 下一篇:一种自助导办系统和方法