[发明专利]基于多模态特征人物属性标注方法、装置、设备及介质

说明书

本公开实施例中提供了一种基于多模态特征人物属性标注方法、装置、设备及介质，属于图像处理技术领域，具体包括：在预设时段内，检测目标视频内的全部人员对应的人脸特征数据和人体特征数据；根据人脸模型识别全部人脸特征数据，并将人脸模型识别为同一人的人脸特征数据标注相同的编号；将编号相同的人脸特征数据检测时刻对应的人体特征数据与编号关联；利用人体特征数据训练得到人体模型；根据人体模型识别全部人体特征数据并更新人脸模型。通过本公开的方案，自动识别并将识别为同一人的人脸特征数据标注相同的编号，再将对应的人体特征数据关联相同编号，再训练得到新的人体模型和人脸模型，提高了所述方法的标注效率、精准度和安全性。

技术领域

本公开涉及图像处理技术领域，尤其涉及一种基于多模态特征人物属性标注方法、装置、设备及介质。

背景技术

目前，在当今社会，人工智能正在越来越多的领域发挥着巨大的作用。比如人脸识别，人体识别等等。这些技术能真正应用到实际场景，与深度学习技术的发展密不可分，而深度学习的基础，就是海量的带有标签的样本，现在获取数据的成本越来越低，面对海量的数据，如何给每个数据打上合适且正确的标签，成为了制约人工智能技术发展的瓶颈。现有的人物属性标注方法，需要依赖人工标注，费时费力，且由于人工操作失误，可能会出现标注不准确，以及，仅针对同一模态进行标注，若需要对其他模态进行标注，则意味着标注量的加倍增长，同时，在当今社会，越来越强调用户数据的隐私，这种人工看图片或者分发数据给外部标注人员的方式，给数据安全带来极大的不可控风险，造成用户的隐私泄漏。

可见，亟需一种高效精准且安全性强的基于多模态特征人物属性标注方法。

发明内容

有鉴于此，本公开实施例提供一种基于多模态特征人物属性标注方法、装置、设备及介质，至少部分解决现有技术中标注效率、精准度和安全性较低的问题。

第一方面，本公开实施例提供了一种基于多模态特征人物属性标注方法，包括：

在预设时段内，检测目标视频内的全部人员对应的人脸特征数据和人体特征数据；

根据人脸模型识别全部所述人脸特征数据，并将所述人脸模型识别为同一人的人脸特征数据标注相同的编号；

将所述编号相同的所述人脸特征数据检测时刻对应的人体特征数据与所述编号关联；

利用所述人体特征数据训练得到人体模型；

根据所述人体模型识别全部所述人体特征数据并更新所述人脸模型。

根据本公开实施例的一种具体实现方式，所述在预设时段内，检测目标视频内的全部人员对应的人脸特征数据和人体特征数据的步骤，包括：

获取所述预设时段内所述目标视频的每一帧图像；

提取全部所述图像内包含的人脸图像形成所述人脸特征数据，以及，提取全部所述图像内包含的人体图像形成所述人体特征数据。

根据本公开实施例的一种具体实现方式，所述根据人脸模型识别全部所述人脸特征数据，并将所述人脸模型识别为同一人的人脸特征数据标注相同的编号的步骤，包括：

将全部所述人脸特征数据输入所述人脸模型，得到全部所述人脸特征数据之间的匹配度；

判断所述匹配度是否大于阈值；

若所述匹配度大于所述阈值，则将所述匹配度对应的人脸特征数据为同一人并标注相同的编号；

若所述匹配度小于或等于所述阈值，则禁止将所述匹配度对应的人脸特征数据为同一人并标注相同的编号。

根据本公开实施例的一种具体实现方式，所述将所述编号相同的所述人脸特征数据检测时刻对应的人体特征数据与所述编号关联的步骤，包括：