[发明专利]动作识别方法、装置、设备、介质和产品有效
申请号: | 202110872867.6 | 申请日: | 2021-07-30 |
公开(公告)号: | CN113591709B | 公开(公告)日: | 2022-09-23 |
发明(设计)人: | 周德森;王健;孙昊 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V10/764;G06V10/774;G06V10/82;G06N3/08;G06N3/04 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 识别 方法 装置 设备 介质 产品 | ||
1.一种动作识别方法,包括:
获取目标视频;
确定所述目标视频对应的各个动作类别;
对于每个动作类别,从所述目标视频中确定该动作类别对应的动作转换前视频帧和动作转换后视频帧;其中,每个动作类别对应的动作转换前视频帧为该动作类别对应的动作初始状态对应的视频帧,每个动作类别对应的动作转换后视频帧为该动作类别对应的动作结束状态对应的视频帧;
基于各个动作类别对应的动作转换前视频帧和动作转换后视频帧,确定各个动作类别对应的动作次数,包括:对于每个动作类别,基于该动作类别对应的动作转换前视频帧和动作转换后视频帧在所述目标视频中的帧位置,确定该动作类别对应的动作转换前视频帧和动作转换后视频帧之间的动作转换次数;基于各个动作类别对应的动作转换次数,确定各个动作类别对应的动作次数。
2.根据权利要求1所述的方法,其中,所述对于每个动作类别,从所述目标视频中确定该动作类别对应的动作转换前视频帧和动作转换后视频帧,包括:
基于所述目标视频和预设的动作识别模型,确定所述目标视频中各个视频帧对应的动作信息;
对于每个动作类别,基于所述动作信息,从所述各个视频帧中确定该动作类别对应的动作转换前视频帧和动作转换后视频帧。
3.根据权利要求2所述的方法,其中,所述基于所述目标视频和预设的动作识别模型,确定所述目标视频中各个视频帧对应的动作信息,包括:
对于所述目标视频中每个视频帧,基于该视频帧和所述预设的动作识别模型,确定该视频帧属于所述各个动作类别对应的动作转换前视频帧和动作转换后视频帧的概率信息;
基于所述概率信息,确定所述动作信息。
4.根据权利要求2所述的方法,其中,所述预设的动作识别模型由以下步骤训练得到:
获取各个样本图像;
确定每个样本图像对应的动作标注信息;
基于所述各个样本图像和待训练模型,确定所述各个样本图像对应的样本动作信息;
基于所述样本动作信息、所述动作标注信息以及预设的损失函数,对所述待训练模型进行训练,直至所述待训练模型收敛,得到所述预设的动作识别模型。
5.根据权利要求4所述的方法,其中,所述获取各个样本图像,包括:
确定所述各个动作类别对应的类别数量;
基于目标参数,获取所述各个动作类别对应的所述各个样本图像;所述目标参数包括以下至少一项:所述类别数量、预设的动作角度、预设的距离参数、动作转换参数。
6.根据权利要求4所述的方法,其中,所述基于所述各个样本图像和待训练模型,确定所述各个样本图像对应的样本动作信息,包括:
对于每个样本图像,基于该样本图像和所述待训练模型,确定该样本图像属于所述各个动作类别对应的动作转换前视频帧和动作转换后视频帧的样本概率信息;
基于所述样本概率信息,确定所述样本动作信息。
7.一种动作识别装置,包括:
视频获取单元,被配置成获取目标视频;
类别确定单元,被配置成确定所述目标视频对应的各个动作类别;
转换帧确定单元,被配置成对于每个动作类别,从所述目标视频中确定该动作类别对应的动作转换前视频帧和动作转换后视频帧;其中,每个动作类别对应的动作转换前视频帧为该动作类别对应的动作初始状态对应的视频帧,每个动作类别对应的动作转换后视频帧为该动作类别对应的动作结束状态对应的视频帧;
动作计数单元,被配置成基于各个动作类别对应的动作转换前视频帧和动作转换后视频帧,确定各个动作类别对应的动作次数;
所述动作计数单元进一步被配置成:
对于每个动作类别,基于该动作类别对应的动作转换前视频帧和动作转换后视频帧在所述目标视频中的帧位置,确定该动作类别对应的动作转换前视频帧和动作转换后视频帧之间的动作转换次数;
基于各个动作类别对应的动作转换次数,确定各个动作类别对应的动作次数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110872867.6/1.html,转载请声明来源钻瓜专利网。