[发明专利]一种端到端的视频发送方法及装置有效
申请号: | 201510991501.5 | 申请日: | 2015-12-24 |
公开(公告)号: | CN106921860B | 公开(公告)日: | 2020-05-08 |
发明(设计)人: | 王瑶;吕静;时永方;谷沉沉;管刚;刘婷婷;刘勇;艾门科杜 | 申请(专利权)人: | 纽约大学;腾讯科技(深圳)有限公司 |
主分类号: | H04N19/164 | 分类号: | H04N19/164;H04N19/115 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 王花丽;张颖玲 |
地址: | 美国*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 端到端 视频 发送 方法 装置 | ||
本发明公开了一种端到端的视频发送方法及装置,其中所述方法包括:确定第一带宽测量值向量基于所述第一带宽测量值向量预测下一个I帧间隔(k+1)的可用带宽预测值根据所述可用带宽预测值和预先设定的置信参数确定用于发送下一个I帧间隔内视频帧的速率限制值;根据所述速率限制值采用层次型‑P(hP)编码方式对所述下一个I帧间隔内的视频帧进行编码,得到编码后的视频流,并记录所述编码后的I帧间隔内每一所述帧的编码速率和时序层优先级;按照预设的第一规则发送所述编码后的视频流。
技术领域
本发明涉及电子技术,尤其涉及一种端到端的视频发送方法及装置。
背景技术
在过去十年中,网络和视频编码技术的发展使得实时视频传输应用,包括视频电话和视频会议,成为人们生活中必不可少的一部分。尽管实时视频传送应用在有线网络和无线网络例如无线保真(Wi-Fi)中很普及,但是实时视频传送应用并没有在移动网络中得到广泛应用。在移动网络中传送实时视频的关键挑战是,通过带宽快速变化、存在数据包延迟和丢失的不稳定的移动网络,同时实现高速和低延迟的视频传输。在移动网络中,视频发送速率超过可用带宽会导致拥塞和难以容忍的数据包延迟,最后造成帧延迟,而过度延迟的帧将被当作丢失处理。另一方面,保守的低发送率会导致移动网络的带宽利用率较低,最终导致视频通话质量较低。
及其有限的设计空间需要联合跨层设计方法来实现实时视频编码、比特率控制、发送速率调整和误差控制。理想的情况下,人们希望视频传送速率能够紧紧地随着移动网络的传送能力变化而变化。但是,传统的反应拥塞控制算法,需要根据数据包丢失,和/或数据包延迟这种形式的拥塞反馈来调整发送速度。这样发送速度调整太慢,不能适应网络传送能力的变化,造成带宽无法充分利用或者较长的数据包延迟。人们更希望能设计一种主动的拥塞控制算法,通过预测移动网络传输能力来计算数据发送速率。同时,对于视频调控,视频编码器可以调整不同的视频编码参数,这样得到的视频比特率就能够同拥塞控制算法确定的发送速率相适应。但是,对于低延迟的编码来说,精确的速率控制是非常有挑战的。同时在采用了先进技术的视频编码器中,严重的速率不匹配仍然经常存在。此外,使问题更加严重的是,丢失和延迟的数据包不仅会造成所对应的帧无法解码,而且使其它帧也无法解码。解码器和传输层应该被设计成具有错误恢复能力,这些丢失和延迟的数据包就会对解码的视频造成较小的影响。
发明内容
有鉴于此,本发明实施例为解决现有技术中存在的至少一个问题而提供一种端到端的视频发送方法及装置,能够避免帧拥塞和使数据包延迟最小化。
本发明实施例的技术方案是这样实现的:
第一方面,本发明实施例提供一种端到端的视频发送方法,所述方法包括:
确定第一带宽测量值向量所述第一带宽测量值向量为第一时刻之前发送的(M-1)个连续的I帧间隔的带宽测量值所组成的向量,所述第一时刻为当前I帧间隔k的结束时刻;
基于所述第一带宽测量值向量预测下一个I帧间隔(k+1)的可用带宽预测值
根据所述可用带宽预测值和预先设定的置信参数确定用于发送下一个I帧间隔内的视频帧的速率限制值;
根据所述速率限制值采用层次型-P(hP)编码方式对所述下一个I帧间隔内的视频帧进行编码,得到编码后的视频流,并记录所述编码后的视频流中每一所述帧的编码速率和时序层优先级;
按照预设的第一规则发送所述编码后的视频流,所述第一规则,用于按照所述时序层优先级在总的编码速率不超过所述速率限制值的情况下,使得下一个I帧间隔(k+1)结束时发送的总帧数最大,同时所选择帧之间的发送时间间隔平均值和方差最小。
第二方面,本发明实施例提供一种端到端的视频发送方法,所述方法包括:
接收发送端发送的视频帧;
将所述发送端发送的视频帧作为突发数据包;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于纽约大学;腾讯科技(深圳)有限公司,未经纽约大学;腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510991501.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:ZDJ9系列电动转辙机用三相交流阻尼轮电动机
- 下一篇:刹车内置式电动机