[发明专利]视频电话的视频包成形

说明书

技术领域

本发明涉及视频电话(VT)，且更确切地说，涉及在VT系统中组装音频和视频包以供传输的技术。 

背景技术

视频电话(VT)涉及对载运音频和视频数据的包进行实时传送。每个VT装置包含视频编码器，其从例如摄像机或视频档案等视频捕获装置获得视频，并产生视频包。类似地，每个VT装置中的音频编码器从例如麦克风或语音合成器等音频捕获装置获得音频，并产生音频包。将所述视频包和音频包放置在无线电链路协议(RLP)队列中。媒体接入控制(MAC)层模块从RLP队列的内容产生媒体接入控制(MAC)层包。将MAC层包转换成物理(PHY)层包，以供经由通信信道传输到另一VT装置。 

在移动VT应用中，VT装置经由从基站到无线终端的无线前向链路(FL)(或“下行链路”)接收物理层包。VT装置经由从无线终端到基站的无线反向链路(RL)(或“上行链路”)传输PHY层包。每个VT装置包含PHY和MAC层，以便转换接收到的PHY和MAC层包，并将所述包有效负载重新组装成音频包和视频包。VT装置内的视频解码器对视频数据进行解码，以便经由显示装置呈现给用户。VT装置内的音频解码器对音频数据进行解码，以便经由音频扬声器呈现。 

无线环境下的移动VT可具有挑战性。无线信道上的数据速率受到限制且随着时间而变动。举例来说，在CDMA2000 1x EV-DO 0版网络中，数据速率可能会因无线覆盖区域内的条件或多个VT用户间的业务拥塞而变动。此外，当数据速率下降到零时，例如当没有数据要发送时，恢复成合理数据速率可能需要时间。结果，移动VT可易于遭受不合意的视频和音频延迟，这会削弱实时地执行流畅的视频会议的能力。 

发明内容

一般来说，本发明针对VT应用的视频包成形技术。所述视频包成形技术可用来将音频包列入优先，以便减少音频延迟。信道条件、过多的视频内容或两者可导致音频包传输的显著延迟。当反向链路(RL)处理量减少时，视频包大小可占满RL且增加音频延迟。确切地说，视频包可填充RLP队列并消耗过多数目的MAC层包，从而导致载运 音频包的MAC层包的连续传输之间出现延迟。 

根据所揭示的技术，对每个视频包的大小进行调整，以便将音频包列入优先以用于无实质延迟地传输。确切地说，对提交给RLP队列的每个视频包的大小进行控制，以确保及时地传输音频。举例来说，可将视频包的大小确定为使得每个音频包可与从RLP队列取出的下一可用MAC层包一起发送。以此方式，可在应用层处为音频包提供服务质量(QoS)。 

可基于例如无线信道等信道的估计处理量来控制视频包大小。可基于信道条件来估计处理量，所述信道条件由当前的无线信道传输速率、无线基站活动性或传输功率限制来表示。可无实质延迟地传送VT会议的音频部分，即使视频部分可能会因信道条件遭受延迟。虽然视频可能会受信道条件损害，但视频包成形确保VT会议各方仍然能够流畅地执行口头会话。 

此外，在有些实施例中，视频包成形技术可进一步包含基于视频缓冲占用率的自适应源速率控制。在此情况下，如果信道条件不支持视频编码速率，则考虑到列入优先的音频包化的需要，可降低源视频编码速率。举例来说，可基于驻存在视频缓冲器中的未包化视频帧数据的量来调整视频编码速率。 

在一个实施例中，本发明提供一种方法，其包括：产生音频包、估计无线信道的处理量，以及产生具有基于估计的处理量而确定的视频包大小的视频包。 

在另一实施例中，本发明提供一种系统，其包括：音频编码器，其产生音频数据；音频缓冲器，其接收音频数据并输出音频包；视频编码器，其产生视频数据；包化器，其估计无线信道的处理量，从视频数据产生具有基于估计的处理量而确定的视频包大小的视频包。 

在额外的实施例中，本发明提供一种计算机可读媒体，其包括致使处理器执行以下操作的指令：产生音频包、估计无线信道的处理量，并产生具有基于估计的处理量而确定的视频包大小的视频包。 

在有些实施例中，基于估计的处理量、音频包的大小和在将视频包放置在输出队列中之前含有所述音频包的输出队列中的经缓冲数据的大小，来确定视频包大小。可将视频包的大小确定为使得可将音频包放置在从输出队列的内容产生的下一可用MAC层包中。 

在附图和以下描述中阐述一个或一个以上实施例的细节。从描述和图式中且从权利要求书中将容易明白其它特征、目的和优点。 

附图说明

图1是说明用于VT应用的视频/音频编码和解码系统的方框图。