[发明专利]基于图像识别的洗涤控制方法、装置、设备及存储介质

说明书

本发明公开了一种基于图像识别的洗涤控制方法、装置、设备及存储介质，该方法包括：获取图像采集装置上传的待洗涤衣物的原始图像；获取经过训练的神经网络模型；根据神经网络模型确定原始图像中的第一衣物信息及目标位置，第一衣物信息包括第一材质集、第一概率及衣物数量；根据目标位置对应的局部特征图进行图像检索，获取第二衣物信息，第二衣物信息包括第二材质集及第二概率；根据第一衣物信息与第二衣物信息确定衣物材质；根据衣物材质和衣物数量确定洗涤参数，并下发洗涤参数，根据洗涤参数进行洗涤。本发明实施例采用神经网络模型和图像检索模型，对衣物图像进行识别，提升衣物识别精度和准确率，自动匹配洗涤参数，改善洗涤效果。

技术领域

本发明涉及家用电器技术领域，尤其涉及一种基于图像识别的洗涤控制方法、装置、设备及存储介质。

背景技术

随着人们对生活品质要求的提高，洗涤装置从最初的单纯洗涤逐渐转变为家庭洗护中心，利用智能识别技术，实现衣物的智能化洗护，成为洗衣机的发展趋势。

目前，部分智能洗衣机，通过待洗涤衣物的吸水率判断衣物材质，并获取对应的洗涤参数，其存在的缺点是，通过吸水率只能大致判断出来待洗涤衣物的整体更接近何种材质，无法准确判断待洗涤衣物的材质及数量，导致推荐的洗涤参数不准确，容易发生过度洗涤或者洗涤不干净的问题，过度洗涤容易造成衣物磨损，影响洗涤效果。

因此，需要对待洗涤衣物的材质识别方法进行改进。

发明内容

本发明提供一种基于图像识别的洗涤控制方法，解决了无法准确判断待洗涤衣物的材质及数量的问题，提升衣物识别精度和准确率。

第一方面，本发明实施例提供了一种基于图像识别的洗涤控制方法，包括以下步骤：

获取图像采集装置上传的待洗涤衣物的原始图像；

获取经过训练的神经网络模型；

根据所述神经网络模型确定所述原始图像中待洗涤衣物的第一衣物信息及目标位置，所述第一衣物信息包括第一材质集、第一概率及衣物数量；

根据目标位置对应的局部特征图进行图像检索，获取待洗涤衣物的第二衣物信息，所述第二衣物信息包括第二材质集及第二概率；

根据所述第一衣物信息与所述第二衣物信息的加权值，确定待洗涤衣物的衣物材质；

根据所述衣物材质和所述衣物数量确定洗涤参数，并下发所述洗涤参数，根据所述洗涤参数进行洗涤。

第二方面，本发明实施例还提供了一种洗涤装置，包括：控制单元、图像采集装置、通讯装置和云端服务器，其中，所述图像采集装置用于采集待洗涤衣物的原始图像，并将所述原始图像发送至所述控制单元；所述通讯装置用于建立所述控制单元与所述云端服务器的通讯连接，并将所述原始图像发送至所述云端服务器；所述云端服务器用于获取经过训练的神经网络模型，根据所述神经网络模型确定所述原始图像中待洗涤衣物的第一衣物信息及目标位置，所述第一衣物信息包括第一材质集、第一概率及衣物数量；根据目标位置对应的局部特征图进行图像检索，获取待洗涤衣物的第二衣物信息，所述第二衣物信息包括第二材质集及第二概率；并根据所述第一衣物信息与所述第二衣物信息的加权值，确定待洗涤衣物的衣物材质；以及根据所述衣物材质和所述衣物数量确定洗涤参数，并将所述洗涤参数下发至所述控制单元，所述控制单元根据所述洗涤参数控制洗涤装置进行洗涤。

第三方面，本发明实施例还提供了一种设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序；当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现上述基于图像识别的洗涤控制方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述基于图像识别的洗涤控制方法。