[发明专利]视频美化方法、装置及电子设备在审
申请号: | 201910580711.3 | 申请日: | 2019-06-29 |
公开(公告)号: | CN110288552A | 公开(公告)日: | 2019-09-27 |
发明(设计)人: | 黄佳斌 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G06T5/00 | 分类号: | G06T5/00;G06K9/00 |
代理公司: | 北京竹辰知识产权代理事务所(普通合伙) 11706 | 代理人: | 陈龙 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 关键点 集合 视频帧 视频 装置及电子设备 目标对象 头部区域 美化 图像处理技术 关键点检测 获取目标 平滑处理 图像美化 图像 | ||
1.一种视频美化方法,其特征在于,包括:
获取目标视频中相邻的第一视频帧和第二视频帧,所述第一视频帧在目标视频的时间维度上早于所述第二视频帧;
分别对第一视频帧和第二视频帧执行针对目标对象的关键点检测,形成第一关键点集合和第二关键点集合;
基于所述第二关键点集合与所述第一关键点集合中关键点之间的对应关系,对所述第二关键点集合中的关键点执行平滑处理,得到第三关键点集合;
分别基于所述第一关键点集合和所述第三关键点集合中的关键点,对所述第一视频帧和所述第二视频帧执行针对目标对象头部区域的图像美化操作,形成第一美化图像和第二美化图像,所述第一美化图像和第二美化图像用以构成美化视频的视频帧。
2.根据权利要求1所述的方法,其特征在于,所述对所述第一视频帧和所述第二视频帧执行针对目标对象头部区域的图像美化操作之后,所述方法还包括:
获取与所述第二视频帧相邻的第三视频帧;
对所述第三视频帧进行关键点检测,形成第四关键点集合;
基于所述第三关键点集合和所述第四关键点集合,对所述第三视频帧执行图像美化操作,形成第三美化图像;
将所述第三美化图像作为所述美化视频的视频帧。
3.根据权利要求1所述的方法,其特征在于,所述基于所述第二关键点集合与所述第一关键点集合中关键点之间的对应关系,对所述第二关键点集合中的关键点执行平滑处理,包括:
获取第一关键点集合中的第一关键点的坐标(x1,y1),以及第二关键点集合中的第二关键点的坐标(x2,y2),所述第二关键点与所述第一关键点相对应;
基于预先设置的平滑系数L,计算第二关键点平滑处理后的坐标(x2’,y2’),其中
x2’=x1*L+x2*(1-L)
y2’=y1*L+y2*(1-L)。
4.根据权利要求1所述的方法,其特征在于,所述分别对第一视频帧和第二视频帧执行针对目标对象的关键点检测,包括:
分别对第一视频帧和第二视频帧上目标对象的头部区域和头部相邻区域执行关键点检测,得到多个头部关键点和多个头部相邻区域关键点。
5.根据权利要求4所述的方法,其特征在于,所述分别对第一视频帧和第二视频帧执行针对目标对象的关键点检测之后,所述方法还包括:
基于所述头部关键点,确定头部区域的中心点坐标及头部表示区域。
6.根据权利要求5所述的方法,其特征在于,所述对所述第一视频帧和所述第二视频帧执行针对目标对象头部区域的图像美化操作,包括:
分别在第一视频帧和第二视频帧上,利用获取到的针对头部区域的形变参数,以所述中心点坐标为中心,对所述头部表示区域的图像执行变形操作,形成头部变形图像。
7.根据权利要求6所述的方法,其特征在于,所述对所述第一视频帧和所述第二视频帧执行针对目标对象头部区域的图像美化操作,还包括:
分别在第一视频帧和第二视频帧上,利用所述中心点坐标和所述头部相邻区域关键点,将所述头部变形图像与所述目标对象的头部相邻区域进行匹配设置,获得目标对象的美化图像。
8.根据权利要求4所述的方法,其特征在于,所述对第一视频帧和第二视频帧上目标对象的头部区域和头部相邻区域执行关键点检测,包括:
分别在第一视频帧和第二视频帧上,获取所述头部区域的灰度图像;
获取所述灰度图像中任一像素点gc的一个局部小邻域内,以gc为中心像素点,以r为半径的p个均匀分布的像素点集合gp;
利用中心像素点gc与像素点集合gp中每一像素点之间的差值,对像素点gc周围的p个均匀分布的的像素点进行二值化处理;
基于二值化处理后的头部区域图像,对目标对象的头部区域执行关键点检测。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910580711.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:视频美化方法、装置及电子设备
- 下一篇:图像美化方法、装置及电子设备