[发明专利]手部运动模糊自动抠图及在人体软分割和背景更换的应用有效
申请号: | 201910356476.1 | 申请日: | 2019-04-29 |
公开(公告)号: | CN110136163B | 公开(公告)日: | 2021-02-12 |
发明(设计)人: | 赵晓梅;吴毅红 | 申请(专利权)人: | 中国科学院自动化研究所 |
主分类号: | G06T7/215 | 分类号: | G06T7/215;G06T3/00;G06T15/50 |
代理公司: | 北京市恒有知识产权代理事务所(普通合伙) 11576 | 代理人: | 郭文浩;尹文会 |
地址: | 100190 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 运动 模糊 自动 人体 分割 背景 更换 应用 | ||
1.一种手部运动模糊自动抠图方法,其特征在于,包括:
步骤S10,获取运动模糊的手部图像作为输入图像;
步骤S20,基于所述输入图像,通过手部运动模糊自动抠图网络,获取手部抠图alpha结果图;所述手部运动模糊自动抠图网络为基于卷积神经网络构建并训练的用于对运动模糊图像自动进行手部抠图的网络;
步骤S30,将获取的手部抠图alpha结果图输出;
其中,所述手部运动模糊自动抠图网络,其训练方法为:
步骤B10,获取手部运动模糊图像集及其对应的真值标注图像集作为训练图像集;
步骤B20,随机选取所述手部运动模糊图像集中一个图像,通过手部运动模糊自动抠图网络,获取运动模糊的手部抠图alpha结果图;
步骤B30,将所述手部抠图alpha结果图与其对应的真值标注图进行对比计算总损失函数值,并采用误差反传的方法更新所述手部运动模糊自动抠图网络的权重;
步骤B40,重复执行步骤B20-步骤B30,直至达到预设的训练结束条件,获得训练好的手部运动模糊自动抠图网络。
2.根据权利要求1所述的手部运动模糊自动抠图方法,其特征在于,步骤B10中“手部运动模糊图像集及其对应的真值标注图像集”采用虚拟图像生成的方法获得,该方法为:
步骤B101,获取包含手和手臂的图像,生成对应的二值掩膜图;
步骤B102,基于所述二值掩膜图,通过与手部运动旋转关节边缘相切的圆圈标注所述手部运动旋转关节;
步骤B103,以标注手部运动旋转关节的圆圈为中心,将手和手臂相应部位旋转预设的角度N次,获得N幅虚拟手部图像以及N幅虚拟手部图像对应的掩膜图;
步骤B104,将所述N幅虚拟手部图像叠加,记做图像SumI;将所述N幅虚拟手部图像对应的掩膜图叠加,记做图像SumM;
步骤B105,基于所述图像SumI、图像SumM,计算虚拟运动模糊手部前景图像F:以及对应的抠图真值标注图α:
步骤B106,将所述虚拟运动手部前景图像F与输入的虚拟背景B叠加,获得手部运动模糊图像。
3.根据权利要求1所述的手部运动模糊自动抠图方法,其特征在于,所述总损失函数为:
其中,为损失函数值;为alpha损失函数;为合成损失函数;ωα、ωI为超参数,代表alpha损失、合成损失在总损失中的权重。
4.根据权利要求3所述的手部运动模糊自动抠图方法,其特征在于,所述alpha损失函数为:
其中,分别表示第i个像素位置抠图alpha结果图、抠图真值标注图的像素值,M代表图像中像素的总个数。
5.根据权利要求3所述的手部运动模糊自动抠图方法,其特征在于,所述合成损失函数为:
其中,分别表示第i个像素位置依据抠图alpha结果图得到的合成图像、依据抠图真值标注图得到的合成图像的像素值,M代表图像中像素的总个数。
6.根据权利要求5所述的手部运动模糊自动抠图方法,其特征在于,所述依据抠图alpha结果图得到的合成图像、所述依据抠图真值标注图得到的合成图像,其获取方法分别为:
Ip=αp·F+(1-αp)·B
Ig=αg·F+(1-αg)·B
其中,Ip、Ig分别代表依据抠图alpha结果图得到的合成图像、依据抠图真值标注图得到的合成图像;αp、αg分别表示抠图alpha结果图、对应真值标注图;F代表虚拟背景;B代表虚拟前景。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所,未经中国科学院自动化研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910356476.1/1.html,转载请声明来源钻瓜专利网。