[发明专利]视频编码方法及装置、视频解码方法及装置、电子设备在审
申请号: | 202111501000.6 | 申请日: | 2021-12-09 |
公开(公告)号: | CN114143540A | 公开(公告)日: | 2022-03-04 |
发明(设计)人: | 方诚;江东;彭双;张雪;林聚财;殷俊 | 申请(专利权)人: | 浙江大华技术股份有限公司 |
主分类号: | H04N19/11 | 分类号: | H04N19/11;H04N19/70;H04N19/176;H04N19/593 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 赵祎 |
地址: | 310053 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 编码 方法 装置 解码 电子设备 | ||
1.一种视频编码方法,其特征在于,包括:
在至少一个划分方向上对视频帧中的编码单元CU进行划分,得到所述CU在每个划分方向上的子块信息;
根据所述CU的参考信息、所述子块信息和预先建立的网络预测模型,采用网络模型帧内子块ISP模式对所述CU进行预测,所述参考信息至少包括所述视频帧的已重建像素区域中与所述CU相邻的参考像素;
采用常规ISP模式对所述CU进行预测;
根据各划分方向对应的网络模型ISP模式的预测误差和常规ISP模式的预测误差,确定所述CU的句法元素信息,所述句法元素信息包括划分信息和ISP模式指示信息,所述ISP模式指示信息用于指示是否采用网络模型ISP模式进行解码;
发送所述CU的句法元素信息。
2.如权利要求1所述的方法,其特征在于,根据所述CU的参考信息、所述子块信息和预先建立的网络预测模型,采用网络模型ISP模式对所述子块进行预测,包括:
根据所述子块信息和建立的所述划分方向上的子块信息与网络预测模型之间的对应关系,确定目标网络预测模型;
根据所述目标网络预测模型和所述CU的参考信息,采用网络模型ISP模式对所述CU进行预测。
3.如权利要求2所述的方法,其特征在于,所述目标网络预测模型包括N个子网络预测单元,N为所述CU在所述划分方向上的子块数量,根据所述目标网络预测模型和所述CU的参考信息,采用网络模型ISP模式对所述CU进行预测,包括:
将所述参考信息和目标子块的模型预测结果输入到第i个子网络预测单元中进行预测,得到第i个子块的模型预测结果,所述目标子块从所述CU在所述划分方向上已完成预测的子块中选取,i为大于1的整数,首个子块的模型预测结果是将所述参考信息输入到首个子网络预测单元中进行预测得到的;
在i小于N时,将i更新为i+1,执行将所述参考信息和目标子块的模型预测结果输入到第i个子网络预测单元中进行预测的步骤,直至i等于N。
4.如权利要求3所述的方法,其特征在于,所述目标子块为已完成预测的所有子块,或者,所述目标子块为已完成预测且与第i个子块距离最近的一个子块。
5.如权利要求3所述的方法,其特征在于,所述参考信息还包括量化参数信息,以及
所述句法元素信息还包括所述量化参数信息。
6.如权利要求3-5任一所述的方法,其特征在于,每个子网络预测单元的输入还包括对应子块的常规预测结果,所述常规预测结果是指采用常规ISP模式进行预测得到的预测结果;以及
所述句法元素信息还包括各子块的常规预测结果的结果推断信息。
7.如权利要求1所述的方法,其特征在于,所述参考像素包括M个像素参考行和M个像素参考列,M为大于零的整数。
8.如权利要求3所述的方法,其特征在于,根据以下步骤训练所述目标网络预测模型:
将获取的CU样本在所述划分方向上划分为N个子块样本;
以所述CU样本的参考信息为输入、第i个子块样本的像素为输出,对预设网络模型中的第i个子网络单元进行训练,在确定第i个子网络单元的预测损失值低于第一设定值后,将i更新为i+1,执行以所述CU样本的参考信息为输入、第i个子块样本的像素为输出,对预设网络模型中的第i个子网络单元进行训练的步骤,直至确定第N个子网络单元的预测损失值低于所述第一设定值时,将当前的预设模型作为所述目标网络预测模型;或者
以所述CU样本的参考信息为输入、N个子块样本的像素为输出,对预设网络模型中的N个子网络单元同步进行训练,在确定N个子网络单元的总预测损失值低于第二设定值时,将当前的预设模型作为所述目标网络预测模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大华技术股份有限公司,未经浙江大华技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111501000.6/1.html,转载请声明来源钻瓜专利网。