[发明专利]一种面向智慧工厂的视频动作识别方法及系统

说明书

本申请涉及视频监控的领域，尤其是涉及一种面向智慧工厂的视频动作识别方法及系统，方法包括获取机器人单次运作视频，训练若干段机器人单次运作视频生成时序动作点位训练数据集；依据巡查命令获取机器人单次运作视频时长的机器人运作视频；从机器人运作视频中节取待识别动作视频；依据待识别动作视频获取与预设时序点组中的判断时序点对应的图像帧；处理图像帧生成判断点位坐标组；按时序依次匹配时序动作点位训练数据集中与判断时序点对应的基准时序点，判断判断点位坐标组是否与基准时序点对应的基准点位坐标组均一致，得到判断结果；依据判断结果确定机器人的视频动作识别结果。本申请具有便于及时发现工厂中出现故障的工业机器人的效果。

技术领域

本申请涉及视频监控的领域，尤其是涉及一种面向智慧工厂的视频动作识别方法及系统。

背景技术

随着工厂对产品加工制造效率要求的提升，现在工厂中大量引进了如六轴机器人等工业机器人。

工厂中一条生产线上会设置多个工业机器人，每个工业机器人负责不同节点的工作，如转运、包装、辅助加工以及封箱等。每个机器人的控制系统中均预先设置有机器人运作程序，在实际生产时，工业机器人基于机器人运作程序进行运作；为了防止工业机器人因为故障而停机过长，一般工厂中会设置专门的巡查人员定时对各个工业机器人进行巡查，从而便于尽早发现出现故障的工业机器人。

在实现本申请的过程中，发现上述技术至少存在以下问题：工厂中的工业机器人数量一般较多，巡查员人员仅是定时做一次巡查，而且单次巡查的时间较长；若某个工业机器人出现故障，则巡查人员有可能需要较差时间后才能发现；可见通过现有技术中难以及时发现工厂中出现故障的工业机器人。

发明内容

为了便于及时发现工厂中出现故障的工业机器人，本申请提供一种面向智慧工厂的视频动作识别方法及系统。

第一方面，本申请提供一种面向智慧工厂的视频动作识别方法，采用如下的技术方案：

一种面向智慧工厂的视频动作识别方法，包括：

获取若干段机器人单次运作视频，处理若干段所述机器人单次运作视频生成时序动作点位训练数据集，所述时序动作点位训练数据集包括基准时序点以及与基准时序点对应的基准点位坐标组；

获取巡查命令，依据所述巡查命令获取时长至少为两倍所述机器人单次运作视频时长的机器人运作视频；

从所述机器人运作视频中节取至少一段所述机器人单次运作视频，记为待识别动作视频；依据所述待识别动作视频获取与预设时序点组中的判断时序点一一对应的图像帧；

处理所述图像帧生成与对应的所述判断时序点对应的判断点位坐标组；

按时序依次匹配所述时序动作点位训练数据集中与所述判断时序点对应的基准时序点，判断与所述判断时序点对应的所述判断点位坐标组是否与相匹配的所述基准时序点对应的基准点位坐标组均一致，得到判断结果；

依据所述判断结果确定机器人的视频动作识别结果。

通过采用上述技术方案，先训练出时序动作点位训练数据集作为机器人对应时序点上自身各点位的坐标的判断基准，然后在需要对机器人进行巡查时，先拍摄对应的机器人运作视频，然后从中获取各个时序点上的机器人上各个点位的坐标，然后将获取各个时序点上的机器人上各个点位的坐标与时序动作点位训练数据集进行比较与判断，从而便于判断出机器人各个时序点上的点位坐标是否达到预设状态，从而便于实现机器人视频动作的识别，如此便于及时发现工厂中出现故障的工业机器人。

在一个具体的可实施方案中，所述处理若干段所述机器人单次运作视频生成时序动作点位训练数据集的步骤包括：

依据预设间隔时间确定与每段所述机器人单次运作视频对应的所述基准时序点；

获取与每个所述基准时序点对应的所述机器人单次运作视频中的图像帧；

处理所述图像帧生成与若干预设基准点位对应的基准点位坐标组；