[发明专利]一种基于深度学习的快速分拣方法在审

专利信息
申请号: 202210377802.9 申请日: 2022-04-06
公开(公告)号: CN114693661A 公开(公告)日: 2022-07-01
发明(设计)人: 刘大鹏 申请(专利权)人: 上海麦牙科技有限公司
主分类号: G06T7/00 分类号: G06T7/00;G06T7/80;G06V20/10;G06N3/08;G06N3/04;G06K9/62;G06V10/26;G06V10/82;G06V10/774
代理公司: 南京中盟科创知识产权代理事务所(特殊普通合伙) 32279 代理人: 孙丽君
地址: 201100 上海市闵行*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 深度 学习 快速 分拣 方法
【权利要求书】:

1.一种基于深度学习的快速分拣方法,其特征在于,该方法包括以下步骤:

S1、采集图像数据并制作标签,并将标签导入深度卷积神经网络训练得到深度学习目标识别与检测网络模型;

S2、利用视觉相机捕获一帧图像;

S3、基于深度学习目标识别与检测网络模型,检测用户选择的抓取物体,并获得抓取目标;

S4、利用U-Net语义分割网络对抓取目标进行分析,获得抓取区域的图像特征;

S5、利用坐标转换方法将图像特征从二维的图像坐标系下转化为三维世界坐标系下,获得机械臂的最优抓取位置;

S6、计算机器人的控制量并控制机械臂完成基于视觉的机械臂自主抓取任务。

2.根据权利要求1所述的一种基于深度学习的快速分拣方法,其特征在于,所述采集图像数据并制作标签,并将标签导入深度卷积神经网络训练得到深度学习目标识别与检测网络模型包括以下步骤:

S11、利用相机采集图像,并通过数据标注软件labelme进行标记,获得数据集,所述数据集包含图像以及相应的身份标签;

S12、将所述数据集按照预设的比例划分为训练数据集和验证数据集,并计算所述训练数据集中图像的均值图像;

S13、将所述训练数据集和所述验证数据集中的所有图像减去均值图像,得到均值化的训练数据集和验证数据集;

S14、利用所述均值化的训练数据集和验证数据集训练深度卷积神经网络,利用损失函数对训练数据集进行训练和学习网络参数,按照预设的训练步长将验证数据集放入卷积神经网络中进行测试,并观察网络的训练收敛情况,直至训练网络收敛,获得训练结果。

3.根据权利要求1所述的一种基于深度学习的快速分拣方法,其特征在于,所述基于深度学习目标识别与检测网络模型,检测用户选择的抓取物体,并获得抓取目标包括以下步骤:

S31、通过深度学习目标识别与检测网络模型训练图像数据;

S32、根据所述深度学习目标识别与检测网络模型的训练过程,不断调整训练权重,直至训练预测结果符合标记结果;

S33、根据所述预测结果生成权重数据,并通过所述权重数据对待预测图像进行推理,获得操作台上物体的位置信息。

4.根据权利要求1所述的一种基于深度学习的快速分拣方法,其特征在于,所述利用U-Net语义分割网络对抓取目标进行分析,获得抓取区域的图像特征包括以下步骤:

S41、利用U-Net语义分割网络并基于训练数据集进行训练,获得权重参数;

S42、通过所述权重参数计算待预测图像,获得抓取目标的抓取区域图像特征。

5.根据权利要求4所述的一种基于深度学习的快速分拣方法,其特征在于,所述U-Net语义分割网络采用的是U-Net网络模型,所述U-Net网络模型的整体结构包括:编码、解码及跳跃连接。

6.根据权利要求4所述的一种基于深度学习的快速分拣方法,其特征在于,所述利用U-Net语义分割网络并基于训练数据集进行训练,获得权重参数还包括:

通过添加交叉熵的Loss损失函数,增加了像素级的Loss权重,

其中,Loss损失函数计算公式为:

其中,E表示损失值;

Ω表示类别数;

x表示每一个类别;

W(x)表示一个one-hot向量,one-hot表示一项属性的特征向量;

pc(x)表示预测样本属于类别c(x)的概率;

其中,W(x)的计算公式如下:

其中,wc表示对类别频率的权重;

d1表示像素点离细胞最近的距离;

d2表示像素点离细胞倒数第二近的距离;

W0表示权重常量,取值为10;

σ表示标准差,其取值为5。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海麦牙科技有限公司,未经上海麦牙科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202210377802.9/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top