[发明专利]用于有损无线链路的视频编解码器数据恢复技术

说明书

公开了用于实现有损无线链路的数据恢复技术的系统、装置和方法。发射器被配置为对视频流进行编码并将所编码的视频流无线传输到接收器，其中所述视频流表示虚拟现实(VR)呈现的环境。所述发射器基于频率将所述视频流划分为多个子流分量。仅计算所述视频流的最低频率子流分量的运动矢量参数，然后使用低MCS级别将所述运动矢量参数发送到所述接收器。当所述接收器接收到所述运动矢量参数，但所述接收器未接收到给定组块的最低频率分量时，所述接收器使用所述运动矢量参数通过从先前视频帧的对应组块外推来重建所述给定组块的所述最低频率分量。

背景技术

相关技术描述

无线通信链路可用于将视频流从计算机(或其他设备)发送到虚拟现实(VR)耳机(或头戴式显示器(HMD))。无线传输VR视频流消除了在计算机与佩戴HMD的用户之间建立电缆连接的需求，从而允许用户不受限制地移动。计算机与HMD之间的传统电缆连接通常包括一根或多根数据电缆和一根或多根电力电缆。允许用户在没有电缆系绳且不必意识到要避开电缆的情况下四处移动可以创建一个更加沉浸式的VR系统。无线发送VR视频流还允许VR系统在比以前更广泛范围的应用中使用。

然而，VR应用是低延迟的应用，通常不缓存视频数据。例如，当用户移动其头部时，这由HMD或控制台检测到，然后随后呈现的视频帧被更新以反映用户的新的观察位置。此外，链路的不断变化的状况可能会影响视频质量。当链路恶化和视频数据丢失或损坏时，这可能会导致糟糕的用户体验。因此，用于无线流传输数据的改进的技术是期望的。

附图说明

通过结合附图参考以下具体实施方式，可更好地理解本文所述的方法和机制的优点，在附图中：

图1为系统的一个实施方案的框图。

图2为无线虚拟现实(VR)系统的一个实施方案的框图。

图3为用于一系列视频帧的一组运动矢量的一个实施方案的框图。

图4为从相邻部分外推视频帧的丢失部分的高分辨率版本的一个实施方案的框图。

图5为用于从视频流的低频子流分量生成运动矢量分量的逻辑的一个实施方案的框图。

图6为示出了用于计算和传输视频流的低频分量的运动矢量参数的方法的一个实施方案的一般化流程图。

图7为示出了用于使用视频帧的低频子流分量的运动矢量参数来重建视频帧的丢失的组块的方法的一个实施方案的一般化流程图。

图8为示出了用于将视频帧的低频子流分量的运动矢量参数嵌入波束形成或ACK事务中的方法的一个实施方案的一般化流程图。

图9为示出了用于从相邻块重建视频帧的块的高频分量的方法的一个实施方案的一般化流程图。

图10为示出了用于选择用于传输视频流的MCS级别的方法的一个实施方案的一般化流程图。

具体实施方式

在以下描述中，阐述了许多特定细节以提供对本文呈现的方法和机制的透彻理解。然而，本领域的一般技术人员应当认识到，可在没有这些特定细节的情况下实现各种实施方案。在某些情况下，并未详细示出众所周知的结构、分量、信号、计算机程序指令和技术，以避免混淆本文所述的方法。应当理解，为了使说明清楚简单，附图中所示的元素未必按比例绘制。例如，元素中的一些的尺寸可相对于其他元件被放大。

本文公开了用于实现有损无线链路的数据恢复技术的各种系统、装置、方法和计算机可读介质。在一个实施方案中，无线通信系统包括通过无线链路进行通信的发射器和接收器(例如，头戴式显示器(HMD))。在一个实施方案中，发射器被配置为对视频流进行编码并且将编码的视频流无线传输到接收器。在一个实施方案中，视频流表示虚拟现实(VR)呈现的环境。