[发明专利]视频处理方法及装置、电子设备和存储介质在审
申请号: | 202110390296.2 | 申请日: | 2021-04-12 |
公开(公告)号: | CN113099272A | 公开(公告)日: | 2021-07-09 |
发明(设计)人: | 沈楷博;周浩;汪文轩;张林洋 | 申请(专利权)人: | 上海商汤智能科技有限公司 |
主分类号: | H04N21/2343 | 分类号: | H04N21/2343;H04N21/4402;H04N21/647 |
代理公司: | 北京林达刘知识产权代理事务所(普通合伙) 11277 | 代理人: | 刘新宇 |
地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 装置 电子设备 存储 介质 | ||
本公开涉及一种视频处理方法及装置、电子设备和存储介质,所述方法包括:获取视频流的视频报文,视频报文包括视频流中至少一个视频帧对应的数据包;基于视频报文,顺序检测视频流中视频帧对应的数据包的丢失信息;根据当前检测的目标视频帧对应的丢失信息,判断目标视频帧是否满足视频帧移除条件;在目标视频帧满足视频帧移除条件的情况下,从视频流中移除与目标视频帧对应的至少一个视频帧,得到处理后的视频流。本公开实施例可实现满足在网络情况较差的场景下,显示清晰画面的视频播放需求。
技术领域
本公开涉及计算机技术领域,尤其涉及一种视频处理方法及装置、电子设备和存储介质。
背景技术
在物联网场景下,例如安防场景,可能存在由于网络传输不稳定、网络波动较大等使得传输的视频报文存在丢包、乱序等情况,在该些情况下,用户通常期望看到可以是清晰的视频画面,而非花屏的视频画面。
发明内容
本公开提出了一种视频处理的技术方案。
根据本公开的一方面,提供了一种视频处理方法,包括:获取视频流的视频报文,所述视频报文包括所述视频流中至少一个视频帧对应的数据包;基于所述视频报文,顺序检测所述视频流中视频帧对应的数据包的丢失信息;根据当前检测的目标视频帧对应的丢失信息,判断所述目标视频帧是否满足视频帧移除条件;在所述目标视频帧满足视频帧移除条件的情况下,从所述视频流中移除与所述目标视频帧对应的至少一个视频帧,得到处理后的视频流。通过该方式,能够满足在网络情况较差的场景下,显示清晰画面的视频播放需求。
在一种可能的实现方式中,所述数据包的丢失信息包括数据包的丢失数量,其中,所述根据当前检测的目标视频帧对应的丢失信息,判断所述目标视频帧是否满足视频帧移除条件,包括:在所述目标视频帧对应的数据包的丢失数量大于或等于第一数量阈值的情况下,确定所述目标视频帧满足视频帧移除条件。通过该方式,可便捷地确定出目标视频帧是否满足视频帧移除条件。
在一种可能的实现方式中,所述数据包的丢失信息包括丢失数据包的序列标识,其中,所述根据当前检测的目标视频帧对应的丢失信息,判断所述目标视频帧是否满足视频帧移除条件,包括:根据所述目标视频帧对应的丢失数据包的序列标识,确定所述目标视频帧连续丢失的数据包数量;在所述目标视频帧连续丢失的数据包数量大于或等于第二数量阈值的情况下,确定所述目标视频帧满足视频帧移除条件。通过该方式,能够基于丢失数据包的序列标识,确定出连续丢失的数据包数量,并基于连续丢失的数据包数量有效地确定出目标视频帧是否满足视频帧移除条件。
在一种可能的实现方式中,所述从所述视频流中移除与所述目标视频帧对应的至少一个视频帧,得到处理后的视频流,包括:在所述目标视频帧为关键帧的情况下,从所述视频流中移除所述目标视频帧所在的第一画面组,得到处理后的视频流,所述第一画面组包括所述目标视频帧以及时序在所述目标视频帧之后的非关键帧;或,在所述目标视频帧为非关键帧的情况下,从所述视频流中移除所述目标视频帧,得到处理后的视频流。通过该方式,能够分别对关键帧以及非关键帧的目标视频帧,进行对应的视频帧移除操作,使得在解码并播放处理后的视频帧的画面质量是清晰度较高的。
在一种可能的实现方式中,所述从所述视频流中移除与所述目标视频帧对应的至少一个视频帧,得到处理后的视频流,还包括:在所述目标视频帧为非关键帧的情况下,判断时序在所述目标视频帧之前连续的N个非关键帧是否已从所述视频流中移除,N为正整数;在所述之前连续的N个非关键帧已从所述视频流中移除的情况下,从所述视频流中移除所述目标视频帧,以及移除所述目标视频帧所在的第二画面组中时序在所述目标视频帧之后的非关键帧。通过该方式,能够对连续满足视频帧移除条件的视频帧,进行对应的视频帧移除操作,使得在解码并播放处理后的视频帧的画面质量是清晰度较高的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤智能科技有限公司,未经上海商汤智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110390296.2/2.html,转载请声明来源钻瓜专利网。