[发明专利]目标物的抓取方法、设备和存储介质

说明书

本申请涉及目标物的抓取方法、设备和存储介质，属于计算机技术领域。该方法包括：获取待抓取区域的深度图像；提取深度图像中待抓取的目标物对应的目标图像区域；获取目标图像区域对应三维点云数据；将三维点云数据输入预先训练的抓取策略预测模型，得到目标物的最佳抓取策略；可以解决当多个目标物堆叠摆放时，现有的目标物抓取方法无法准确地识别待抓取区域中堆叠放置的目标物的具体位置，而导致的无法准确抓取的目标物的问题；由于最佳抓取策略是基于目标图像区域对应三维点云数据生成的，所以最佳抓取策略可以准确地反映待抓取区域中目标物的三维信息，在目标物堆叠放置时，可以准确定位目标物位置，从而提高目标物抓取的准确性。

【技术领域】

本申请涉及一种目标物的抓取方法、设备和存储介质，属于计算机技术领域。

【背景技术】

随着自动控制技术的不断发展，机器手、抓取机器人等自动抓取设备被广泛应用于工业流水线中。人们可以利用抓取设备实现对目标物分拣、组装和转移等操作的自动化，提高了工业生产的效率。

现有的目标物抓取方法包括：生成待抓取区域的2D图；然后，使用2D图确定目标物的空间位置，得到位置信息；将位置信息传输至抓取设备，以供抓取设备按照位置信息抓取目标物。

但是，由于2D图不包含深度信息，所以当多个目标物堆叠摆放在待抓取区域时，现有的目标物抓取方法无法准确地识别待抓取区域中堆叠放置的目标物的具体位置。这样，会导致由于目标物的空间位置定位错误，而无法准确抓取目标物的问题。

【发明内容】

本申请提供了一种目标物的抓取方法、设备和存储介质，可以解决现有的目标物抓取方法无法准确地识别待抓取区域中堆叠放置的目标物的具体位置，从而导致由于目标物的空间位置定位错误，而无法准确抓取目标物的问题。本申请提供如下技术方案：

第一方面，提供一种目标物的抓取方法，所述方法包括：

获取待抓取区域的深度图像；

提取所述深度图像中待抓取的目标物对应的目标图像区域；

获取所述目标图像区域对应三维点云数据；

将所述三维点云数据输入预先训练的抓取策略预测模型，得到所述目标物的最佳抓取策略，以供抓取设备按照所述最佳抓取策略抓取所述目标物；所述最佳抓取策略包括最佳抓取位置信息和最佳抓取位姿信息；

其中，所述抓取策略预测模型用于预测使用多种抓取位姿对所述目标物上不同的位置进行抓取时抓取成功的概率，所述最佳抓取策略为抓取所述目标物成功的概率最高时对应的抓取策略。

可选地，所述策略预测模型包括概率预测子模型，所述概率预测子模型用于预测利用每种抓取策略抓取所述目标物时抓取成功的概率；所述将所述三维点云数据输入预先训练的抓取策略预测模型，得到所述目标物的最佳抓取策略，包括：

基于所述三维点云数据选取n个初始采样点，并确定所述n个初始采样点的抓取位姿；所述n为正整数；

将本次选取的采样点和每个采样点对应的抓取位姿输入所述概率预测子模型，得到利用每个采样点和对应的抓取位姿构成的抓取策略抓取所述目标物时成功的概率；

将每个采样点对应的概率按照由大到小的顺序排序，并确定排序在前m位的采样点，得到m个采样点；所述m为小于或等于输入所述概率预测子模型的采样点的数量；

使用高斯混合模型拟合所述m个采样点的分布情况，得到采样点分布；

基于所述采样点分布选取k个采样点，并确定所述k个采样点的抓取位姿，再次执行所述将本次选取的采样点和每个采样点对应的抓取位姿输入所述概率预测子模型的步骤，直至所述概率预测子模型的预测次数达到预设次数时停止，所述k为正整数；

将最后一次预测时概率最高的采样点和对应的抓取位姿确定为所述目标物的最佳抓取策略。