[发明专利]一种基于移动网络与wifi视频传输增强方法的系统

权利要求书

1.一种基于移动网络与wifi视频传输增强方法的系统，其特征在于，包含视频源模块(1)，画面拆解模块(2)，分片一编码模块(3)，分片二编码模块(4)，运动检测模块(5)，wifi网络传送模块(6)，移动网络传送模块(7)，网络接收模块(8)，网络打包模块(9)，分片一解码模块(10)，分片二解码模块(11)，画面合并模块(12)，画面倍帧模块(13)，视频显示模块(14)；

视频源模块(1)：产生高帧率高分辨率YUV视频流，每个视频帧携带时戳；

画面拆解模块(2)：接收视频源模块(1)的YUV视频流，对高帧率视频流按照时间先后顺序排序，使用奇偶帧进行拆分，得到两个低帧率的视频流，奇数帧为分片一视频流，偶数帧为分片二视频流，根据人眼对横向的变化不如纵向敏感，对分片一视频流与分片二视频流的每帧YUV视频流的画面按列拆分，按照奇数列像素与偶数列像素拆成两个画面，每个分片得到低帧率低分辨率的奇偶分块，把分割得到的视频流与时戳发送给分片一编码模块(3)与分片二编码模块(4)；

分片一编码模块(3)：接收画面拆解模块(2)的分片一视频流，接收运动检测模块(5)画面是否运动通知，如果画面不运动，分片一视频流与分片二视频流画面内容相差不大，此时采用分片一与分片二数据互补形成高分辨率策略，分片一编码模块(3)去除分片一视频流偶分块，对奇分块进行视频编码压缩，把压缩视频流与时戳与合并标识发送给网络打包模块(9)，如果画面运动，分片一视频流与分片二视频流画面内容相差较大，不适合互补提高分辨率，此时采用分片一与分片二数据互补形成高帧率策略，同时保留偶分块与奇分块信息，对视频流偶分块与视频流奇分块的每个对应像素进行线性插值，得到线性插值的分块，对视频编码压缩，把压缩视频流与时戳与倍帧标识发送给网络打包模块(9)；

分片二编码模块(4)：接收画面拆解模块(2)的分片一视频流，接收运动检测模块(5)画面是否运动通知，如果画面不运动，分片一视频流与分片二视频流画面内容相差不大，此时采用分片一与分片二数据互补形成高分辨率策略，分片一编码模块(3 )去除分片一视频流奇分块，对偶分块进行视频编码压缩，把压缩视频流与时戳与合并标识发送给网络打包模块(9)；如果画面运动，分片一视频流与分片二视频流画面内容相差较大，此时采用分片一与分片二数据互补形成高帧率策略，同时保留偶分块与奇分块信息，对视频流偶分块与视频流奇分块的每个对应像素进行线性插值，得到线性插值的分块，对视频编码压缩，把压缩视频流与时戳与倍帧标识发送给网络打包模块(9)；

运动检测模块(5)：接收视频源模块(1)的YUV视频流，对前后两帧的每个明度Y像素数据进行每个相减，相减值的绝对值大于阈值则该像素运动，把所以运动像素从图像提取中的运动区域，运动区域除以图像的面积得到运动系数,如果运动系数小于阈值则认为画面不运动，否则认为画面运动；把画面不运动与画面运动通知发送给分片一编码模块(3)与分片二编码模块(4 )；

wifi网络传送模块(6)：接收网络打包模块(9)的视频流，使用wifi传送网络把视频压缩流通过wifi网络发送给网络接收模块(8)；

移动网络传送模块(7)：接收网络打包模块(9)的视频流，使用移动传送网络把视频压缩流通过移动网络发送给网络接收模块(8)；

网络接收模块(8)：接收wifi网络传送模块(6)与移动网络传送模块(7)发送视频网络流；把分片一的视频流发送给分片一解码模块(10)，把分片二的视频流发送给分片二解码模块(11)；

网络打包模块(9)：接收分片一编码模块(3)与分片二编码模块(4)视频流，对视频流进行RTP打包，把时戳打入RTP头，把倍帧标识或合并标识打入RTP的附加数据中；网络打包模块(9)把分片一视频流发给wifi网络传送模块(6)，把分片二视频流发给移动网络传送模块(7)；

分片一解码模块(10)：接收网络接收模块(8)的分片一的视频流，去除RTP头取出视频流的帧压缩数据，取出RTP的时戳作为帧的时戳，在RTP的附加数据取出倍帧标识或合并标识，对帧压缩数据进行视频解码得到分片一的YUV图像数据；存在倍帧标识，则把分片一的YUV图像数据与时戳发给画面倍帧模块(13)；存在合并标识则把分片一的YUV图像数据与时戳发给画面合并模块(12)；

分片二解码模块(11)：接收网络接收模块(8)的分片二的视频流，去除RTP头取出视频流的帧压缩数据，取出RTP的时戳作为帧的时戳，在RTP的附加数据取出倍帧标识或合并标识，对帧压缩数据进行视频解码得到分片二的YUV图像数据；存在倍帧标识，则把分片二的YUV图像数据与时戳发给画面倍帧模块(13)；存在合并标识则把分片二的YUV图像数据与时戳发给画面合并模块(12)；

画面合并模块(12)：接收分片一解码模块(10)的分片一的YUV图像数据与时戳，接收分片二解码模块(11)的分片二的YUV图像数据与时戳；把YUV图像数据按照时戳进行排序，如果分片一的YUV图像数据与分片二的YUV图像数据没有丢失，分片一的YUV图像数据与分片二的YUV图像数据为交错，把相邻分片一的YUV图像数据与分片二的YUV图像数据进行合并，分片一的YUV图像数据放在奇数列，分片二的YUV图像数据放在偶数列，最终得到高分辨率图像数据；如果分片一的YUV图像数据与分片二的YUV图像数据丢失一份数据，这YUV图像数据进行横向插值，YUV相邻列的每个像素的进行线性插值，得到新列插入两个相邻列间，最后两列按照线性插值除了生成中间列，再生成右侧列，作为生成图像最后一列，这仍然还原出有限失真的高分辨率图像数据；采用WiFi与移动网络两个通道同时传输互为残差视频，当一个通道出问题时，本方法仍然能恢复出一个有限失真的视频图像，当两个通道都正常工作时，则得到高分辨率图像数据；把生成图像数据发送给视频显示模块(14)；

画面倍帧模块(13)：接收分片一解码模块(10)的分片一的YUV图像数据与时戳，接收分片二解码模块(11)的分片二的YUV图像数据与时戳；把YUV图像数据按照时戳进行排序，对YUV图像数据进行横向插值，YUV相邻列的每个像素的进行线性插值，得到新列插入两个相邻列间，最后两列按照线性插值除了生成中间列，再生成右侧列，作为生成图像最后一列，通过图像拉伸还原出高分辨率图像数据；采用WiFi与移动网络两个通道同时传输视频数据，当一个通道出问题时，得到低帧率视频图像，当两个通道都正常工作时，则得到高帧率的图像数据；生成YUV图像数据发送给视频显示模块(14)；

视频显示模块(14)：接收画面合并模块(12)的YUV图像数据渲染显示，接收画面倍帧模块(13)的YUV图像数据渲染显示；当视频源模块(1)的图像处于静止状态，使用Wi Fi与移动网络两个通道同时传输互为残差视频，共同输出高分辨率图像，当视频源模块(1)的图像处于运动状态，使用WiFi与移动网络两个通道同时传输间隔独立视频图像，共同输出高帧率视频图像。