[发明专利]用于生成视频的方法、装置、设备和存储介质有效
申请号: | 201910340393.3 | 申请日: | 2019-04-25 |
公开(公告)号: | CN110147737B | 公开(公告)日: | 2021-06-18 |
发明(设计)人: | 龙翔;高原;李鑫;刘霄;张赫男;文石磊;丁二锐 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 李辉;李峥宇 |
地址: | 100094 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 生成 视频 方法 装置 设备 存储 介质 | ||
1.一种用于生成视频的方法,包括:
获取包括用于生成所述视频的一组目标动作的动作视频,所述动作视频包括由人物执行所述一组目标动作的一组动作图像;
从所述一组动作图像中,标识所述一组目标动作;
根据目标人物的动作模型中包括的目标人物的动作、所述目标人物的目标人物图像与所述目标人物图像的目标蒙版之间的关联关系,分别确定与所述一组目标动作相关联的一组目标人物图像和所述一组目标人物图像的一组目标蒙版,其中针对所述一组目标人物图像中的给定目标人物图像:所述给定目标人物图像的给定蒙版包括所述目标人物图像与背景之间的轮廓,所述人物在所述一组动作图像中的位置不同于所述目标人物在所述一组目标人物图像中的位置;以及
基于所述一组目标人物图像和所述一组目标蒙版,生成包括由所述目标人物执行所述一组目标动作的所述视频。
2.根据权利要求1所述的方法,其中从所述一组动作图像中,标识所述一组目标动作包括:针对所述一组动作图像中的给定动作图像,
确定由所述人物执行所述一组目标动作中的给定目标动作时的多个人体关键点;以及
基于所述多个人体关键点,确定所述给定动作图像包括的给定目标动作。
3.根据权利要求2所述的方法,其中基于所述人体关键点,确定所述给定动作图像包括的给定目标动作包括:
按照预定顺序连接所述多个人体关键点;以及
基于连接的所述多个人体关键点确定所述给定目标动作。
4.根据权利要求2所述的方法,进一步包括:
确定所述人物在所述给定动作图像中的位置;以及
基于所述位置调整所述一组目标人物图像中的给定目标人物图像和所述给定目标人物图像的给定目标蒙版的位置。
5.根据权利要求2所述的方法,进一步包括:
确定所述给定动作图像中的人物图像的尺寸;以及
基于所述尺寸调整所述一组目标人物图像中的给定目标人物图像和所述给定目标人物图像的给定目标蒙版的尺寸。
6.根据权利要求4所述的方法,其中基于所述一组目标人物图像和所述一组目标蒙版,生成所述视频包括:
基于调整后的所述一组目标人物图像和调整后的所述一组目标蒙版,生成所述视频。
7.根据权利要求1所述的方法,其中基于所述一组目标人物图像和所述一组目标蒙版,生成所述视频包括:
获取用于生成所述视频的背景图像;
基于所述一组目标人物图像和所述一组目标蒙版,生成一组前景图像;以及
基于所述一组前景图像和所述背景图像,生成所述视频。
8.根据权利要求1所述的方法,其中分别确定与所述一组目标动作相关联的一组目标人物图像和所述一组目标人物图像的一组目标蒙版包括:针对所述一组目标动作中的给定目标动作,
基于所述动作模型,确定与给定目标动作相关联的给定目标人物图像和所述给定目标人物图像的给定目标蒙版。
9.根据权利要求1所述的方法,其中针对所述一组目标人物图像中的给定目标人物图像:所述轮廓包括所述目标人物的影子。
10.根据权利要求1所述的方法,进一步包括:获取所述动作模型,包括:
获取包括所述目标人物的训练视频,所述训练视频包括由所述目标人物执行一组动作的一组图像;
从所述一组图像中,分别标识所述一组动作;以及
基于所述一组图像和所述一组动作训练所述动作模型,使得训练后的所述动作模型描述所述一组动作、所述目标人物在一组图像中的一组人物图像和所述一组人物图像的一组目标蒙版之间的关联关系。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910340393.3/1.html,转载请声明来源钻瓜专利网。