[发明专利]一种针对服装照片的特征提取方法在审
申请号: | 201810008857.6 | 申请日: | 2018-01-04 |
公开(公告)号: | CN108229503A | 公开(公告)日: | 2018-06-29 |
发明(设计)人: | 陈刚;顾晓玲;寿黎但;陈珂;伍赛;胡天磊 | 申请(专利权)人: | 浙江大学 |
主分类号: | G06K9/46 | 分类号: | G06K9/46;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 杭州求是专利事务所有限公司 33200 | 代理人: | 林超 |
地址: | 310058 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 特征提取模型 服装 损失函数 特征提取 标签 任务分类 参数优化 反向传播 特征向量 训练数据 构建 聚类 可用 鲁棒 算法 标注 检索 采集 通用 分类 应用 优化 学习 | ||
1.一种针对服装照片的特征提取方法,其特征在于:所述方法的步骤如下:为服装照片构建基于深度学习模型的特征提取模型,特征提取模型中包含多任务分类损失函数和四元损失函数;采集若干带标签的服装照片作为训练数据,将带标签的服装照片及其标签输入到特征提取模型进行训练,在多任务分类损失函数和四元损失函数的共同优化下通过反向传播算法进行特征提取模型的参数优化,获得训练后的特征提取模型,以训练后的特征提取模型对带标签的服装照片进行处理提取获得特征向量。
2.根据权利要求1所述的一种针对服装照片的特征提取方法,其特征在于:所述的步骤1)中,带标签的服装照片从社交媒体的数据库采集,是社交媒体用户分享的以街景为图像背景的包含人体全身的照片。
3.根据权利要求2所述的一种针对服装照片的特征提取方法,其特征在于:每张服装照片均包含了季节标签、服装风格标签和服装类别标签。
4.根据权利要求1所述的一种针对服装照片的特征提取方法,其特征在于:所述步骤2)中,特征提取模型包括四个并列独立的深度卷积神经网络,四个深度卷积神经网络的网络结构和参数完全一致;每个深度卷积神经网络采用了VGG-16网络的第一个全连接层及之前的所有网络结构,并将VGG-16网络的第一个全连接层后面的网络结构替换为128维的全连接层作为特征嵌入层;
并且在特征嵌入层的后面设有两个并行独立的损失层:
一个损失层是多任务分类损失层,多任务分类损失层包括三个并列的全连接层和softmax层,三个全连接层的输入共同连接到第四个深度卷积神经网络的特征嵌入层的输出,三个全连接层的输出共同连接softmax层的输入,softmax层的输出作为多任务分类损失层的输出;
另一个损失层是四元损失层,四个深度卷积神经网络的特征嵌入层的输出均经二范数归一化处理(L2-Normalization)后共同连接到四元损失层的输入。
5.根据权利要求4所述的一种针对服装照片的特征提取方法,其特征在于:
所述的多任务分类损失层由以下多任务分类损失函数构成,多任务分类损失函数为三个子损失函数的加权和Lclass,具体如下:
LClass=λ1Ls+λ2Lt+λ3Lg
其中,Ls是季节分类任务的子损失函数,Lt是服装风格分类任务的子损失函数,Lg是服装类别分类任务的子损失函数,λ1、λ2和λ3分别是季节分类、服装风格分类和服装类别分类的权重系数,用来控制三个分类任务的子损失函数对特征学习的影响;
三个子损失函数Ls、Lt和Lg计算为:
其中,N是训练图片的总数,i为图片的索引,j为类别的索引,xi是第四个深度卷积神经网络输入的第i张图片,Yis是第i张图片的季节标签,Yis∈[1,4],Yit是第i张图片的服装风格标签,Yit∈[1,7],是第i张图片第j个服装类别标签,Kg是服装类别个数,是第i张图片xi对应的第j个季节分类任务对应的softmax层的输出,是第i张图片xi对应的第Yis个季节分类任务对应的softmax层的输出,是第i张图片xi对应的第j个服装风格分类任务对应的softmax层的输出,是第i张图片xi对应的第Yit个季节分类任务对应的softmax层的输出,是第i张图片xi对应的第j个服装类别分类任务对应的softmax层的输出。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810008857.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种树冠层的三维点云数据中叶片基点提取方法
- 下一篇:图像解析方法及装置