[发明专利]视频图像的传输方法、发送设备、视频通话方法和设备有效
申请号: | 201910888693.5 | 申请日: | 2019-09-19 |
公开(公告)号: | CN112532908B | 公开(公告)日: | 2022-07-19 |
发明(设计)人: | 周旭升;卢宇峰 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | H04N7/14 | 分类号: | H04N7/14;H04N21/4788;H04N19/58 |
代理公司: | 北京汇思诚业知识产权代理有限公司 11444 | 代理人: | 冯伟 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 图像 传输 方法 发送 设备 通话 | ||
本申请实施例提供一种视频图像的传输方法、发送设备、视频通话方法和设备,上述视频图像包括多个视频帧,上述视频图像的传输方法中,对上述多个视频帧进行编码,得到经编码的码流,所述码流至少包括表示帧间参考关系的信息。本申请中,当前帧的前N帧中的每一帧均参考与本帧时域距离最近的前向LTR帧,上述前向LTR帧为发送端设备标记为LTR帧的已编码的视频帧,也就是说,本实施例中,发送端设备在标记LTR帧时,无需等待接收端设备的反馈,因此可以实现一个RTT内标记多个LTR帧,从而可以大大缩短帧间参考距离,提升视频图像的编码质量。
技术领域
本申请涉及通信技术领域,特别涉及视频图像的传输方法、发送设备、视频通话方法和设备。
背景技术
随着5G的进一步发展,人们对视频交互的需求也愈发强烈,视频通话作为互动交互基础服务,近年来也在快速增长。现在,视频通话作为基础能力已嵌入车载终端、智慧大屏、无人机、儿童手表、智能音箱、远程医疗等全场景智能终端上,为实现未来智能社会全场景互联互通打下基础。
虽说网络覆盖越来越完善,而现实网络情况也复杂多变,弱信号的覆盖区域、家庭无线网络(Wireless Fidelity;以下简称:WiFi)穿墙及公用WiFi的多用户强占使用等场景下,会存在突发高丢包和/或网络拥塞等现象,从而导致接收到的视频数据不完整造成画面卡顿。
针对突发高丢包造成的数据不完整,现有相关技术主要借助发送端重编码I帧来恢复视频画面流畅,但这会引入明显的卡顿现象,严重影响视频通话的高清流畅度体验。
视频编解码与传输控制作为视频通话的核心技术,对视频通话质量与流畅度起到关键作用。但现有相关技术中,视频通话的编解码与传输控制分属两个子系统,视频帧间参考关系相对稳定,存在视频流畅度与清晰度无法兼顾,体验不佳的问题。
发明内容
本申请提供了一种视频图像的传输方法、发送设备、视频通话方法和设备,本申请还提供一种视频图像的显示方法和视频图像的接收设备,以实现图像质量与图像流畅度之间达到较好的平衡。
第一方面,本申请提供了一种视频图像的传输方法,所述视频图像包括多个视频帧,包括:
对所述多个视频帧进行编码,得到经编码的码流,所述码流至少包括表示帧间参考关系的信息;另外,上述码流中还可以包括已编码数据,例如:当前帧与参考帧的残差数据等;上述表示帧间参考关系的信息可以放在条带头(slice header)中;
发送所述经编码的码流,其中,所述表示帧间参考关系的信息包括当前帧的帧间参考关系的信息和当前帧的前N帧的帧间参考关系的信息,其中:
所述当前帧的帧间参考关系的信息表示本帧参考与本帧时域距离最近的目标前向长期参考LTR帧,这里的本帧是指当前帧,其中,上述目标前向LTR帧为发送端设备接收到接收端设备确认消息的前向LTR帧,具体地,上述目标前向LTR帧可以为发送端设备标记为LTR帧并且接收到接收端设备发送的确认消息的已编码的视频帧,上述确认消息与所述目标前向LTR帧对应;本申请中,发送端设备即本端,例如也可以叫做编码端设备,接收端设备为对端或远端,例如也可以叫做解码端设备;
所述当前帧的前N帧的帧间参考关系的信息表示所述前N帧中的每一帧均参考与本帧时域距离最近的前向LTR帧,这里的本帧是指前N帧中的每一帧,所述前向LTR帧为所述发送端设备标记为LTR帧的已编码的视频帧,本申请中,前向LTR帧存储在DPB中。
需要说明的是,当前帧的前N帧与当前帧之间可以存在其他帧,也可以是当前帧的前N帧与当前帧之间是时域上紧邻的关系,针对前者的情况,其他帧的帧间参考关系可以与所述前N帧一样,也可以采用其他的帧间参考关系。
换句话说,当前帧与时域距离最近的前向LTR帧(例如A)之间的多个帧中的所有帧可以参考同一个LTR帧(例如A),也可以是多个帧中的部分帧参考同一个LTR帧(例如A)。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910888693.5/2.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序