[发明专利]视频处理方法、装置、设备和存储介质有效
申请号: | 202010434409.X | 申请日: | 2020-05-21 |
公开(公告)号: | CN111836072B | 公开(公告)日: | 2022-09-13 |
发明(设计)人: | 张修宝;沈海峰 | 申请(专利权)人: | 北京嘀嘀无限科技发展有限公司 |
主分类号: | H04N21/234 | 分类号: | H04N21/234;H04N21/44;G06T7/73;G06T7/60 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 罗利娜 |
地址: | 100193 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 装置 设备 存储 介质 | ||
1.一种用于视频处理的方法,包括:
获取对象给定部分在视频的多个帧中各自的特征点信息,所述特征点信息分别指示所述给定部分的多个特征点在所述多个帧中的位置;
基于所述特征点信息,确定所述给定部分的所述多个特征点在所述多个帧内各自的帧内位置关系;
基于所述特征点信息,确定所述给定部分的所述多个特征点的位置关系跨所述多个帧之间的帧间位置变化;以及
基于所述帧内位置关系和所述帧间位置变化,从所述多个帧中选择呈现所述给定部分的不同姿态的多个目标帧,
其中针对所述多个帧中的给定帧,
基于所述给定部分的所述多个特征点在所述给定帧内的帧内位置关系,确定所述给定部分在所述给定帧内处于显著偏转姿态或非显著偏转姿态;
如果确定所述给定部分在所述给定帧内处于所述显著偏转姿态,将所述给定帧选择为目标帧;以及
如果确定所述给定部分在所述给定帧内处于所述非显著偏转姿态,基于所述帧间位置变化来确定所述给定帧是否适合被选择为目标帧。
2.根据权利要求1所述的方法,其中确定所述帧间位置变化包括:针对所述多个帧中的所述给定帧,
如果所述多个帧中的一个帧已被选择为目标帧,确定所述多个特征点的位置关系跨所述给定帧和已选择的所述目标帧之间的帧间位置变化,并且
其中选择所述多个目标帧包括:
如果所述多个特征点的位置关系跨所述给定帧和已选择的所述目标帧之间的帧间位置变化超过变化阈值,将所述给定帧选择为目标帧。
3.根据权利要求1所述的方法,其中确定所述帧内位置关系包括:
针对所述多个帧中的给定帧,
确定所述多个特征点中的预定特征点相对于所述多个特征点中的一个或多个参考特征点在预定方向上的偏移情况。
4.根据权利要求3所述的方法,其中所述给定部分包括面部,所述预定特征点包括鼻子特征点,所述参考特征点包括所述面部的两个眼睛特征点和两个嘴角特征点,所述预定方向是水平或者垂直方向,并且其中确定所述偏移情况包括:
确定所述鼻子特征点在水平或垂直方向上是超出由所述两个眼睛特征点和所述两个嘴角特征点形成的区域还是在所述区域内。
5.根据权利要求2所述的方法,其中确定所述多个特征点的位置关系跨所述给定帧和已选择的所述目标帧之间的帧间位置变化包括:
针对所述给定帧,计算从所述多个特征点中的预定特征点分别连接到所述多个特征点中的第一对参考特征点的两条线段形成的夹角的第一角度;
针对所述给定帧,计算从所述预定特征点分别连接到所述多个特征点中的第二对参考特征点的两条线段形成的夹角的第二角度;
基于所述第一角度与所述第二角度的比来确定所述给定部分在所述给定帧内的垂直偏转度量;以及
基于所述给定部分在所述给定帧内的所述垂直偏转度量与所述给定部分在已选择的所述目标帧内的垂直偏转度量之间的差异,来确定所述给定部分跨所述给定帧和已选择的所述目标帧之间的垂直偏转变化。
6.根据权利要求5所述的方法,其中所述给定部分包括面部,所述预定特征点包括鼻子特征点,并且
其中所述第一对参考特征点包括两个眼睛特征点,并且所述第二对参考点包括两个嘴角特征点。
7.根据权利要求4所述的方法,其中确定所述多个特征点的位置关系跨所述给定帧和已选择的所述目标帧之间的帧间位置变化包括:
针对所述给定帧,计算从所述多个特征点中的预定特征点分别连接到所述多个特征点中的第三对参考特征点的两条线段形成的夹角的第三角度;
针对所述给定帧,计算从所述预定特征点分别连接到所述多个特征点中的第四对参考特征点的两条线段形成的夹角的第四角度;
基于所述第三角度与所述第四角度的比来确定所述给定部分在所述给定帧内的水平偏转度量;以及
基于所述给定部分在所述给定帧内的所述水平偏转度量与所述给定部分在已选择的所述目标帧内的水平偏转度量之间的差异,来确定所述给定部分跨所述给定帧和已选择的所述目标帧之间的水平偏转变化。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京嘀嘀无限科技发展有限公司,未经北京嘀嘀无限科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010434409.X/1.html,转载请声明来源钻瓜专利网。