[发明专利]染色方法、装置和计算机系统及介质在审
申请号: | 201811549517.0 | 申请日: | 2018-12-18 |
公开(公告)号: | CN111340921A | 公开(公告)日: | 2020-06-26 |
发明(设计)人: | 刘享军;毛伟;杨超 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06T15/00 | 分类号: | G06T15/00 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 杨静 |
地址: | 100086 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 染色 方法 装置 计算机系统 介质 | ||
1.一种染色方法,包括:
获取视频流,所述视频流包括至少一个视频帧;
对于所述至少一个视频帧中的一个视频帧,
获取视频帧的待染色区域,
至少基于所述待染色区域的灰度图和染料的三原色值得到染色后的视频帧;以及
至少基于所述染色后的视频帧得到染色后的视频流。
2.根据权利要求1所述的方法,其中,所述获取视频流包括:
接收视频流;或者
通过摄像头采集视频流。
3.根据权利要求1所述的方法,还包括:
在获取视频流之后,对所述视频流的至少一个视频帧进行标准化处理,得到标准化图像,
其中,所述标准化图像具有以下任意一种或多种特征:预设的分辨率和预设的图像格式。
4.根据权利要求1所述的方法,其中,所述获取视频帧的待染色区域包括:
将一个视频帧输入待染色区域获取模型,得到遮罩图,所述遮罩图为二值图,所述待染色区域对应所述二值图中一种值的区域;以及
基于所述遮罩图和所述视频帧得到所述待染色区域。
5.根据权利要求4所述的方法,其中:
所述至少基于所述待染色区域的灰度图和染料的三原色值得到染色后的视频帧包括:
获取所述视频帧的灰度图;
基于染料的三原色值对所述视频帧的灰度图进行染色,得到染色视频帧;
利用所述遮罩图对所述染色视频帧和所述视频帧进行混合;
或者
所述至少基于所述待染色区域的灰度图和染料的三原色值得到染色后的视频帧包括:
获取所述视频帧的灰度图;
基于所述遮罩图和所述视频帧的灰度图得到待染色区域的灰度图;
基于染料的三原色值对所述待染色区域的灰度图进行染色,得到染色区域;以及
将所述染色区域和所述视频帧进行混合。
6.根据权利要求4所述的方法,还包括:
在得到遮罩图之后,对所述遮罩图的图像边缘进行模糊处理,得到模糊化遮罩图;以及
所述基于所述遮罩图和所述视频帧得到所述待染色区域包括基于所述模糊化遮罩图和所述视频帧得到所述待染色区域。
7.根据权利要求6所述的方法,其中,所述对所述遮罩图的图像边缘进行模糊处理包括:
将所述遮罩图发送给图像处理器;
在着色器中对每个像素进行领域采样,得到每个像素的颜色值;以及
按照高斯核对每个像素的颜色值进行加权平均处理。
8.根据权利要求4所述的方法,其中,所述待染色区域获取模型包括编码器部分和解码器部分,所述编码器部分和所述解码器部分分别为卷积神经网络,所述编码器部分对应的卷积神经网络的最后一层为卷积层,所述解码器部分对应的卷积神经网络与所述编码器部分对应的卷积神经网络的各层次相对应,且所述解码器部分对应的卷积神经网络无需进行归一化和激活函数运算。
9.根据权利要求8所述的方法,其中:
所述编码器部分依次包括输入层、卷积层、第一指定个数瓶颈层和卷积层;以及
所述解码器部分依次包括第二指定个数上采样层、卷积层和输出层。
10.根据权利要求8所述的方法,其中,所述待染色区域获取模型通过以下方式进行训练:
将第二版移动端深度学习网络的网络参数作为所述待染色区域获取模型的初始化参数;以及
将训练数据输入所述待染色区域获取模型进行训练,所述训练数据包括待染色区域标识信息。
11.根据权利要求1所述的方法,还包括:
在至少基于所述染色后的视频帧得到染色后的视频流之后,展示所述染色后的视频流。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811549517.0/1.html,转载请声明来源钻瓜专利网。