[发明专利]一种视频特征提取方法、装置、可读存储介质及终端设备有效
| 申请号： | 201910288927.2 | 申请日： | 2019-04-11 |
| 公开（公告）号： | CN110147819B | 公开（公告）日： | 2021-02-26 |
| 发明（设计）人： | 乔宇;周磊;王亚立 | 申请（专利权）人： | 深圳先进技术研究院 |
| 主分类号： | G06K9/62 | 分类号： | G06K9/62 |
| 代理公司： | 深圳中一专利商标事务所 44237 | 代理人： | 李海宝 |
| 地址： | 518055 广东省深圳*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 一种 视频 特征 提取 方法 装置 可读 存储 介质 终端设备 | ||
1.一种视频特征提取方法，其特征在于，包括：
接收待处理的视频帧序列，并对所述视频帧序列进行空间卷积计算，得到所述视频帧序列的空间卷积输出，所述视频帧序列中包括若干帧连续的视频图像；
对所述空间卷积输出进行时间卷积计算，得到所述视频帧序列的第一时间卷积输出；
对所述空间卷积输出进行空间池化计算，得到所述视频帧序列的空间池化输出；
对所述空间池化输出进行时间卷积计算，得到所述视频帧序列的第二时间卷积输出；
根据所述第二时间卷积输出对所述第一时间卷积输出进行矫正，得到所述视频帧序列的特征提取结果。
2.根据权利要求1所述的视频特征提取方法，其特征在于，所述对所述空间卷积输出进行时间卷积计算，得到所述视频帧序列的第一时间卷积输出包括：
根据下式对所述空间卷积输出进行时间卷积计算：
或者，根据下式对所述空间卷积输出进行时间卷积计算：
其中，1≤t≤T，T为所述视频帧序列的帧数，Xt为所述视频帧序列的第t帧视频图像的空间卷积输出，且H为所述空间卷积输出的高度，W为所述空间卷积输出的宽度，Cx为所述空间卷积输出的特征通道数目，1≤h≤H，1≤w≤W，1≤cx≤Cx，Yt为所述视频帧序列的第一时间卷积输出，且Cy为所述第一时间卷积输出的特征通道数目，α(cy)为预设的第cy个第一时间卷积滤波器，1≤cy≤Cy，且γ(cy)为预设的第cy个点卷积滤波器，且
3.根据权利要求2所述的视频特征提取方法，其特征在于，所述对所述空间卷积输出进行空间池化计算，得到所述视频帧序列的空间池化输出包括：
根据下式对所述空间卷积输出进行空间池化计算：
xt(cx)＝Sh,w[Xt(cx,h,w)]
其中，S为最大池化函数或者均值池化函数，xt(cx)为所述视频帧序列的第t帧视频图像在第cx个特征通道的空间池化输出。
4.根据权利要求3所述的视频特征提取方法，其特征在于，所述对所述空间池化输出进行时间卷积计算，得到所述视频帧序列的第二时间卷积输出包括：
根据下式对所述空间池化输出进行时间卷积计算：
其中，β(cy)为预设的第cy个第二时间卷积滤波器，且yt(cy)为所述视频帧序列的第t帧视频图像在第cy个特征通道的第二时间卷积输出。
5.根据权利要求4所述的视频特征提取方法，其特征在于，所述根据所述第二时间卷积输出对所述第一时间卷积输出进行矫正，得到所述视频帧序列的特征提取结果包括：
根据下式对所述第一时间卷积输出进行矫正：
其中，σ为预设的激活函数，为所述视频帧序列的特征提取结果。
6.一种视频特征提取装置，其特征在于，包括：
空间卷积模块，用于接收待处理的视频帧序列，并对所述视频帧序列进行空间卷积计算，得到所述视频帧序列的空间卷积输出，所述视频帧序列中包括若干帧连续的视频图像；
第一时间卷积模块，用于对所述空间卷积输出进行时间卷积计算，得到所述视频帧序列的第一时间卷积输出；
空间池化模块，用于对所述空间卷积输出进行空间池化计算，得到所述视频帧序列的空间池化输出；
第二时间卷积模块，用于对所述空间池化输出进行时间卷积计算，得到所述视频帧序列的第二时间卷积输出；
特征矫正模块，用于根据所述第二时间卷积输出对所述第一时间卷积输出进行矫正，得到所述视频帧序列的特征提取结果。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于深圳先进技术研究院，未经深圳先进技术研究院许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201910288927.2/1.html，转载请声明来源钻瓜专利网。
