[发明专利]动作流检测方法、装置、设备及存储介质在审
申请号: | 202010519642.8 | 申请日: | 2020-06-09 |
公开(公告)号: | CN111814557A | 公开(公告)日: | 2020-10-23 |
发明(设计)人: | 高宗;谭泽汉;陈彦宇;马雅奇;谭龙田;周慧子;陈高;李海棠 | 申请(专利权)人: | 珠海格力电器股份有限公司;珠海联云科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04;G06Q50/04 |
代理公司: | 北京华夏泰和知识产权代理有限公司 11662 | 代理人: | 杜欣;李雪 |
地址: | 519070*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 检测 方法 装置 设备 存储 介质 | ||
本申请涉及一种动作流检测方法、装置、设备及存储介质,属于计算机技术领域。方法包括:获取周期起始标记和实时视频流数据;根据所述实时视频流数据和所述周期起始标记,对所述周期起始标记指示的时刻开始的每个动作进行检测,其中,对第i个动作的检测步骤如下:确定所述实时视频流数据中所述第i个动作的动作执行情况;检测所述第i个动作的动作执行情况是否符合预存储的单个所述周期内标准动作的动作执行标准,获得所述第i个动作的检测结果。本申请用以解决现有的动作检测中,无法对动作流的执行情况进行实时、全面诊断的问题。
技术领域
本申请涉及计算机技术领域,尤其涉及一种动作流检测方法、装置、设备及存储介质。
背景技术
在生产制造过程中,为保证生产质量,通常需要遵循一定的规程,对于复杂的更是需要有经验的技工才能完成,但一些流程因为人的主观因素难免会出现失误,而目前对于由操作错误导致的问题,通常只能在产品质检流程甚至是在使用过程中才能发现,发现错误的时间大大滞后于产生时间,由此可能会产生批量的质量问题,会对产品质量和使用造成极大的影响,所以在生产制造中,对于动作的执行情况进行监测,在产品质量中有着至关重要的作用。
目前针对动作执行情况的监测主要包括两类:人工巡检和自动监测。人工巡检的方式通过人眼对相关的历史视频或离线视频进行观察,粗略遍历,不仅耗时耗力,效率低,容易出现漏检、误检的情况,而且大多数都是离线的历史视频,不能及时发现异常行为,也不能及时处理异常情况,对于重大危害行为,可能会造成无法弥补的损失;现有的自动监测方法,基于视频分析,只能对一些禁止性动作和必要动作进行监测,不能对每个动作进行实时、全面详细的诊断,因此,现有生产制造中对动作执行情况实时准确分析的问题亟待解决。
发明内容
本申请提供了一种动作流异常检测方法、装置、设备及存储介质,用以解决现有的动作检测中,无法对动作流的执行情况进行实时、全面诊断的问题。
第一方面,本申请实施例提供了一种动作流检测方法,包括:
获取周期起始标记和实时视频流数据;
根据所述实时视频流数据和所述周期起始标记,对所述周期起始标记指示的时刻开始的每个动作进行检测,其中,对第i个动作的检测步骤如下:确定所述实时视频流数据中所述第i个动作的动作执行情况;检测所述第i个动作的动作执行情况是否符合预存储的单个所述周期内标准动作的动作执行标准,获得所述第i个动作的检测结果。
进一步的,所述动作执行情况包括动作类别、与所述动作类别对应的动作类别置信度和动作持续时间;
所述检测所述第i个动作的动作执行情况是否符合预存储的单个所述周期内标准动作的动作执行标准,获得所述第i个动作的检测结果包括:
判断所述第i个动作是否属于预存储的单个所述周期内标准动作的动作类别;
若不属于,获得所述第i个动作不属于所述周期内的标准动作的检测结果;
若属于,根据所述动作类别、所述动作类别置信度和所述动作持续时间,获得所述第i个动作的检测结果。
进一步的,所述根据所述动作类别、所述动作类别置信度和所述动作持续时间,获得所述第i个动作的检测结果包括:
检测所述第i个动作的动作类别是否符合预存储的单个所述周期内第i个标准动作的动作类别;
若符合,确定所述第i个动作的动作类别正常,根据所述动作类别置信度和所述动作持续时间,获得所述第i个动作的检测结果;
若不符合,获得所述第i个动作的动作类别异常的检测结果。
进一步的,所述根据所述动作类别置信度和所述动作持续时间,获得所述第i个动作的检测结果包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于珠海格力电器股份有限公司;珠海联云科技有限公司,未经珠海格力电器股份有限公司;珠海联云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010519642.8/2.html,转载请声明来源钻瓜专利网。