[发明专利]一种视频状态确定方法和装置有效
申请号: | 201811123017.0 | 申请日: | 2018-09-26 |
公开(公告)号: | CN109344761B | 公开(公告)日: | 2021-03-19 |
发明(设计)人: | 王存;郑凯;段立新;江建军 | 申请(专利权)人: | 国信优易数据股份有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04 |
代理公司: | 北京超凡志成知识产权代理事务所(普通合伙) 11371 | 代理人: | 王文红 |
地址: | 100070 北京市丰台区南四环*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 状态 确定 方法 装置 | ||
1.一种视频状态确定方法,其特征在于,该方法包括:
基于当前时刻的输入对象和上一个时刻的状态,确定当前时刻的光流变化量,其中,所述光流变化量为当前时刻的输入对象相对于上一个时刻的输入对象之间的位移变化量;
基于所确定的所述光流变化量,对所述上一个时刻的状态进行扭曲处理,得到扭曲处理结果,其中,确定的扭曲处理结果为λ=warp(ht-1,Ut,Vt);
其中,λ为扭曲处理结果;warp(ht-1,Ut,Vt)为根据当前时刻在水平方向的光流变化量Ut和垂直方向的光流变化量Vt,对上一个时刻的状态进行图形扭曲;基于所述扭曲处理结果、所述当前时刻的输入对象以及所述上一个时刻的状态,确定所述当前时刻的状态;
其中,所述基于所述扭曲处理结果、所述当前时刻的输入对象以及所述上一个时刻的状态,确定所述当前时刻的状态,包括:
基于所述当前时刻的输入对象、所述扭曲处理结果,以及预设的卷积核和预设的第一激活函数,确定当前时刻的更新值和重置值:
其中,根据以下公式计算当前时刻的更新值Zt:
Zt=σ(Wxz*xt+Whz*λ)
其中,xt为当前时刻的输入对象,在输入对象为图像时,xt为图像中各像素点的像素值,Zt为当前时刻的更新值;σ为第一激活函数,Wxz为更新门对象卷积核,表征当前时刻的输入对象对更新门函数的影响程度;*为卷积操作;Whz为更新门状态卷积核,表征上一个时刻的状态对更新门函数的影响程度;
根据以下公式计算当前时刻的重置值Rt:
Rt=σ(Wxr*xt+Whr*λ)
其中,Rt为当前时刻的重置值;σ为第一激活函数,Wxr为重置门对象卷积核,表征当前时刻的输入对象对重置门函数的影响程度;*为卷积操作;Whr为重置门状态卷积核,表征上一个时刻的状态对重置门函数的影响程度;
基于所述当前时刻的输入对象、所述扭曲处理结果、所述重置值和预设的第二激活函数,确定当前时刻的候选状态:
其中,根据以下公式计算当前时刻的候选状态
其中,为当前时刻的候选状态;f为第二激活函数;Wxh为候选对象卷积核,表征当前时刻的输入对象对候选状态函数的影响程度;*为卷积操作;Whh为候选状态卷积核,表征上一个时刻的状态对候选状态函数的影响程度;
基于所述当前时刻的候选状态、所述上一个时刻的状态以及所述更新值,确定所述当前时刻的状态:
其中,通过以下公式确定当前时刻的状态ht:
其中,ht为当前时刻的状态;ht-1为上一个时刻的状态;α为实数,⊙为哈达玛积操作。
2.如权利要求1中所述的方法,其特征在于,所述基于当前时刻的输入对象和上一个时刻的状态,确定当前时刻的光流变化量,包括:
将所述当前时刻的输入对象和所述上一个时刻的状态输入到预设的光流网络模型,得到当前时刻的第一预设方向的光流变化量和在第二预设方向的光流变化量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国信优易数据股份有限公司,未经国信优易数据股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811123017.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种自然场景下人脸表情数据集的构建方法
- 下一篇:图像处理方法和装置