[发明专利]一种视频处理方法、装置、电子设备及存储介质有效
申请号: | 202011625866.3 | 申请日: | 2020-12-31 |
公开(公告)号: | CN112866797B | 公开(公告)日: | 2023-03-24 |
发明(设计)人: | 程俊奇;四建楼 | 申请(专利权)人: | 上海商汤智能科技有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/845;G06V10/26 |
代理公司: | 北京中知恒瑞知识产权代理事务所(普通合伙) 11889 | 代理人: | 吴迪 |
地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 处理 方法 装置 电子设备 存储 介质 | ||
1.一种视频处理方法,其特征在于,包括:
获取视频片段;所述视频片段中包括当前帧的第一图像和上一帧的第二图像;
确定所述第一图像的目标位置区域的第一语义分割结果以及所述第一图像的目标位置区域的第一特征信息;
获取所述第二图像的第二语义分割结果以及所述第二图像的第二特征信息;
基于所述第一语义分割结果和所述第一特征信息、所述第二语义分割结果和所述第二特征信息,确定所述第一图像的第二语义分割结果;其中,所述确定所述第一图像的目标位置区域的第一语义分割结果,包括:
获取所述第二图像的目标位置区域的位置范围,并从所述第一图像中截取与所述第二图像的目标位置区域的位置范围匹配的初始位置区域;
确定所述第一图像中所述初始位置区域的初始语义分割结果;
基于所述初始位置区域的所述初始语义分割结果和所述第一图像除所述初始位置区域之外的其它位置区域的设定语义分割结果,得到所述第一图像的初始语义分割结果;
基于所述第一图像的初始语义分割结果,确定所述第一图像的更新位置区域;
基于所述第二图像的目标位置区域的位置范围、所述第一图像的更新位置区域的位置范围,确定所述第一图像的目标位置区域;
从所述第一图像的初始语义分割结果中选取所述第一图像的目标位置区域对应的初始语义分割结果,作为所述第一图像的目标位置区域的第一语义分割结果。
2.根据权利要求1所述的方法,其特征在于,根据以下方式确定所述第一图像的目标位置区域的第一特征信息:
提取所述第一图像的目标位置区域中每个第一像素点的颜色特征值和位置特征值;
基于所述第一像素点的所述颜色特征值、所述位置特征值和时域特征值,生成所述第一像素点的第一特征信息;所述时域特征值用于表示所述第一图像与所述第二图像之间的采集时间顺序信息。
3.根据权利要求1或2所述的方法,其特征在于,所述目标位置区域为所述第一图像中的部分区域;所述基于所述第一语义分割结果和所述第一特征信息、所述第二语义分割结果和所述第二特征信息,确定所述第一图像的第二语义分割结果,包括:
基于所述第一语义分割结果和所述第一特征信息、所述第二语义分割结果和所述第二特征信息,确定所述第一图像的目标位置区域的第二语义分割结果;
基于所述第一图像的目标位置区域的第二语义分割结果以及所述第一图像的目标位置区域以外的其它位置区域的设定语义分割结果,得到所述第一图像的第二语义分割结果。
4.根据权利要求3所述的方法,其特征在于,所述基于所述第一语义分割结果和所述第一特征信息、所述第二语义分割结果和所述第二特征信息,确定所述第一图像的目标位置区域的第二语义分割结果,包括:
针对所述第一图像的目标位置区域内的第一像素点,根据所述第一像素点的第一语义分割结果以及所述第一特征信息,以及所述第二图像中与所述第一像素点匹配的第二像素点的第二语义分割结果以及所述第二特征信息,确定所述第一像素点和所述第二像素点属于目标类别的置信度;
基于所述置信度,对所述第一像素点的第一语义分割结果进行调整,得到所述第一像素点的第二语义分割结果,所述第二语义分割结果包括所述第一像素点属于所述目标类别的第二概率值。
5.根据权利要求4所述的方法,其特征在于,所述基于所述置信度,对所述第一像素点的第一语义分割结果进行调整,得到所述第一像素点的第二语义分割结果,包括:
基于所述置信度,对所述第一像素点的第一语义分割结果和所述第二像素点的第二语义分割结果分别进行调整,得到第一更新语义分割结果以及第二更新语义分割结果;
基于所述第一更新语义分割结果和所述第一特征信息、以及所述第二更新语义分割结果和所述第二特征信息,确定所述第一像素点和所述第二像素点属于所述目标类别的当前置信度;
基于所述当前置信度,对所述第一更新语义分割结果和所述第二更新语义分割结果进行调整后,返回确定所述当前置信度的步骤,直至达到预设调整次数后,得到所述第一像素点的第二语义分割结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤智能科技有限公司,未经上海商汤智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011625866.3/1.html,转载请声明来源钻瓜专利网。