[发明专利]一种视频动作分类的处理方法及装置有效
| 申请号： | 201710573692.2 | 申请日： | 2017-07-14 |
| 公开（公告）号： | CN107463949B | 公开（公告）日： | 2020-02-21 |
| 发明（设计）人： | 陈雯婕;伏文龙;曹立宏 | 申请（专利权）人： | 北京协同创新研究院;中国传媒大学 |
| 主分类号： | G06K9/62 | 分类号： | G06K9/62;G06K9/00;G06N3/04 |
| 代理公司： | 北京路浩知识产权代理有限公司 11002 | 代理人： | 王庆龙;曹杰 |
| 地址： | 100094 北京市海*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明实施例提供一种视频动作分类的处理方法及装置，方法包括：读取待识别的视频帧，并提取视频帧的光流图像；选择一帧视频帧作为起始帧，提取起始帧后的连续m帧视频帧x方向和y方向的光流图像，并与起始帧的RGB图像作为一个样本；将每一个样本中的光流图像和起始帧的RGB图像同时输入SCNN和TCNN，以分别获得SCNN和TCNN的最高卷积层计算出的卷积投影；根据卷积投影和多尺度卷积核的融合模块，获取视频动作的时空融合特征投影；将时空融合特征投影依次通过卷积层、最大池化层和全连接层进行计算，并根据计算结果和分类器获得视频动作所属分类。装置执行上述方法。本发明实施例提供的视频动作分类的处理方法及装置，能够提高复杂场景下人物动作的识别准确率。 | ||
| 搜索关键词： | 一种 视频 动作 分类 处理 方法 装置 | ||
【主权项】：
一种视频动作分类的处理方法，其特征在于，包括：读取待识别的视频帧，并提取所述视频帧的光流图像；选择一帧视频帧作为起始帧，提取所述起始帧后的连续m帧视频帧x方向和y方向的光流图像，并与所述起始帧的RGB图像作为一个样本；将每一个样本中的光流图像和起始帧的RGB图像同时输入空间卷积神经网络和时序卷积神经网络，以分别获得所述空间卷积神经网络和所述时序卷积神经网络的最高卷积层计算出的卷积投影；根据所述卷积投影和多尺度卷积核的融合模块，获取所述视频帧中视频动作的时空融合特征投影；将所述时空融合特征投影依次通过卷积层、最大池化层和全连接层进行计算，并根据计算出的结果和分类器获得所述时空融合特征投影对应的视频动作的所属分类类别。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京协同创新研究院;中国传媒大学，未经北京协同创新研究院;中国传媒大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201710573692.2/，转载请声明来源钻瓜专利网。
