[发明专利]视频数据处理方法、装置、设备以及存储介质在审
申请号: | 202110874693.7 | 申请日: | 2021-07-30 |
公开(公告)号: | CN113556582A | 公开(公告)日: | 2021-10-26 |
发明(设计)人: | 戴卫斌;王一;李伟琪;龚力;于波;周宇虹 | 申请(专利权)人: | 海宁奕斯伟集成电路设计有限公司;北京奕斯伟计算技术有限公司 |
主分类号: | H04N21/2343 | 分类号: | H04N21/2343;H04N21/4402;G06N3/04 |
代理公司: | 北京市立方律师事务所 11330 | 代理人: | 张筱宁 |
地址: | 314400 浙江省嘉兴市海宁市海*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 数据处理 方法 装置 设备 以及 存储 介质 | ||
本申请实施例公开了一种视频数据处理方法、装置、设备以及存储介质。该方法包括:确定待处理视频的初始帧序列,确定初始帧序列中各图像帧的各像素点的亮度;基于初始帧序列中各图像帧的各像素点的亮度,对初始帧序列进行抽帧处理,将抽帧后的帧序列作为第一帧序列;对第一帧序列进行编码,得到待处理视频的编码数据,编码数据携带各参考帧的参考帧序号,各参考帧为与抽帧处理中抽取出的目标帧序列相邻的图像帧;向第一设备发送编码数据,以使第一设备基于编码数据和各参考帧序号对应的参考帧,确定第二帧序列,并基于第二帧序列确定播放视频。采用本申请实施例,节省视频数据传输过程中的带宽,适用性高。
技术领域
本申请涉及人工智能领域,尤其涉及一种视频数据处理方法、装置、设备以及存储介质。
背景技术
随着互联网技术的高速发展,短视频、在线直播等多媒体数据激增,不断增长的视频用户对视觉效果的要求越来越高,对于视频数据处理方法,如何减少带宽消耗的同时,保证视频的视觉效果提出了挑战。
目前在对待处理视频进行编码时,往往采用固定的方式进行抽帧处理以降低待处理视频的帧率。但现有的抽帧处理方式往往会引起视频画面的不连续等问题。在对待处理视频的编码数据进行解码后,往往还会采用插帧处理以提升解码得到的帧序列的帧率,以提升视频质量。但是传统的视频插帧方式,如帧采样、帧混合等会产生运动抖动和画面不清晰等问题。
发明内容
本申请实施例提供一种视频数据处理方法、装置、设备以及存储介质,可节省视频数据传输过程中的带宽,提升视频清晰度,适用性高。
第一方面,本申请实施例提供一种视频数据处理方法,该方法包括:
确定待处理视频的初始帧序列,确定上述初始帧序列中各图像帧的各像素点的亮度;
基于上述初始帧序列中各图像帧的各像素点的亮度,对上述初始帧序列进行抽帧处理,将抽帧后的帧序列作为第一帧序列;
对上述第一帧序列进行编码,得到上述待处理视频的编码数据,上述编码数据携带各参考帧的参考帧序号,各上述参考帧为与上述抽帧处理中抽取出的目标帧序列相邻的图像帧;
向第一设备发送上述编码数据,以使上述第一设备基于上述编码数据和各上述参考帧序号对应的参考帧,确定第二帧序列,并基于上述第二帧序列确定播放视频。
第二方面,本申请实施例提供了一种视频数据处理方法,该方法包括:
获取第二设备发送的编码数据,对上述编码数据进行解码得到第一帧序列,上述第一帧序列是上述第二设备对待处理视频的初始帧序列进行抽帧处理后的帧序列;
基于上述编码数据携带的各参考帧序号,确定上述第一帧序列对应的参考帧中的各组关联参考帧,每组上述关联参考帧包括与上述抽帧处理中抽取出的目标帧序列相邻的两个参考帧;
对于每组上述关联参考帧,基于该组关联参考帧中的第一参考帧和第二参考帧,确定上述第一参考帧对应的第一预测帧和上述第二参考帧对应的第二预测帧、以及帧预测过程中的遮挡权重和重建残差,基于上述第一预测帧、上述第二预测帧、上述遮挡权重和上述重建残差,确定该组关联参考帧对应的目标预测帧;
将各组上述关联参考帧对应的目标预测帧进行插帧处理,得到第二帧序列,基于上述第二帧序列得到播放视频。
第三方面,本申请实施例提供了一种视频数据处理装置,该装置包括:
亮度确定模块,用于确定待处理视频的初始帧序列,确定上述初始帧序列中各图像帧的各像素点的亮度;
帧序列确定模块,用于基于上述初始帧序列中各图像帧的各像素点的亮度,对上述初始帧序列进行抽帧处理,将抽帧后的帧序列作为第一帧序列;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于海宁奕斯伟集成电路设计有限公司;北京奕斯伟计算技术有限公司,未经海宁奕斯伟集成电路设计有限公司;北京奕斯伟计算技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110874693.7/2.html,转载请声明来源钻瓜专利网。