[发明专利]视频美化方法、装置及电子设备有效
申请号: | 201910580723.6 | 申请日: | 2019-06-29 |
公开(公告)号: | CN110288554B | 公开(公告)日: | 2022-09-16 |
发明(设计)人: | 黄佳斌 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G06T5/00 | 分类号: | G06T5/00;G06V20/40;G06V40/10 |
代理公司: | 北京风雅颂专利代理有限公司 11403 | 代理人: | 徐雅琴 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 美化 方法 装置 电子设备 | ||
1.一种视频美化方法,其特征在于,包括:
获取目标视频中相邻的第一视频帧和第二视频帧,所述第一视频帧在目标视频的时间维度上早于所述第二视频帧;
分别对第一视频帧和第二视频帧执行针对目标对象臀部和腿部的关键点检测,形成臀部关键点和腿部关键点;
基于所述臀部关键点和所述腿部关键点,确定目标对象在第一视频帧和第二视频帧上的腿部的表示区域及腿部中心点;
对所述第一视频帧和所述第二视频帧上的表示区域、腿部中心点及形变参数进行平滑美化处理,包括:当所述腿部的延伸方向与所述目标视频的视频帧的垂直方向不一致时,以所述第一视频帧和所述第二视频帧上的肩部关键点的中心点和臀部关键点的中心点为连线,建立所述目标对象在所述目标视频中的修正垂直方向;基于所述修正垂直方向,对所述腿部的表示区域执行拉伸操作;
所述对所述第一视频帧和所述第二视频帧上的表示区域、腿部中心点及形变参数进行平滑美化处理,包括:分别计算腿部的表示区域、腿部中心点及形变参数在第一视频帧和第二视频帧上的抖动值;基于所述抖动值,确定所述腿部的表示区域和所述腿部中心点的坐标,以及所述形变参数的最终值;基于确定的所述腿部的表示区域和所述腿部中心点的坐标,以及所述形变参数的最终值,对所述腿部的表示区域执行拉伸处理;
其中,基于目标对象的轮廓、腿部表示区域以及腿部中心点在第一视频帧和第二视频帧上的偏移距离,确定所述抖动值和抖动参数;将所述第二视频帧上的所述腿部的表示区域和所述腿部中心点的坐标减去抖动值,确定所述腿部的表示区域和所述腿部中心点的坐标;将所述第一视频帧的形变参数乘以抖动参数作为第二视频帧的形变参数的最终值。
2.根据权利要求1所述的方法,其特征在于,所述对所述第一视频帧和所述第二视频帧上的表示区域、腿部中心点及形变参数进行平滑美化处理之后,所述方法还包括:
获取与所述第二视频帧相邻的第三视频帧;
对所述第三视频帧进行关键点检测,得到臀部关键点和腿部的关键点;
基于第二视频帧和第三视频帧上的臀部关键点和腿部关键点,对所述第三视频帧执行图像美化操作,形成第三美化图像;
将所述第三美化图像作为美化视频的视频帧。
3.根据权利要求1所述的方法,其特征在于,所述对所述第一视频帧和所述第二视频帧上的表示区域、腿部中心点及形变参数进行平滑美化处理,包括:
获取所述第一视频帧上的第一关键点的坐标(x1,y1),以及第二视频帧上第二关键点的坐标(x2,y2),所述第二关键点与所述第一关键点相对应;
基于预先设置的平滑系数L,计算第二关键点平滑处理后的坐标(x2’,y2’),其中
x2’=x1*L+x2*(1-L)
y2’=y1*L+y2*(1-L)。
4.根据权利要求1所述的方法,其特征在于,所述分别对第一视频帧和第二视频帧执行针对目标对象臀部和腿部的关键点检测,形成臀部关键点和腿部关键点,包括:
对所述目标对象的腿部执行关键点检测,得到膝盖关键点和脚踝关键点;
将所述膝盖关键点和所述脚踝关键点作为所述腿部关键点。
5.根据权利要求1所述的方法,其特征在于,所述分别对第一视频帧和第二视频帧执行针对目标对象臀部和腿部的关键点检测,包括:
对目标对象执行边缘检测,获得目标对象的轮廓点;
选择任一轮廓点作为起始扫描点,建立指向起始扫描点的行指针和列指针,以及向右指向行指针、向下指向列指针的总指针;
在基于轮廓点扫描起始扫描点之外的其他扫描点时,相应的建立其他扫描点的行指针、列指针及总指针;
基于所述行指针、列指针及总指针,确定目标对象的臀部关键点、膝盖关键点和脚踝关键点。
6.根据权利要求1所述的方法,其特征在于,所述分别对第一视频帧和第二视频帧执行针对目标对象臀部和腿部的关键点检测之前,所述方法还包括:
将所述目标图像变换为灰度图像;
对所述灰度图像进行边缘检测,得到用于关键点检测的所述目标对象的边缘轮廓。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910580723.6/1.html,转载请声明来源钻瓜专利网。