[发明专利]一种低延迟视频处理方法、系统及装置在审
申请号: | 202210287130.2 | 申请日: | 2022-03-22 |
公开(公告)号: | CN114866733A | 公开(公告)日: | 2022-08-05 |
发明(设计)人: | 孙杰;周京波;侯连勇 | 申请(专利权)人: | 感知信息科技(浙江)有限责任公司 |
主分类号: | H04N7/18 | 分类号: | H04N7/18;H04N7/01;H04N19/174 |
代理公司: | 成都鱼爪智云知识产权代理有限公司 51308 | 代理人: | 谷科均 |
地址: | 315806 浙江省宁*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 延迟 视频 处理 方法 系统 装置 | ||
1.一种低延迟视频处理方法,其特征在于,包括:
通过LVDS摄像头采集的视频帧数据,并将所述视频帧数据通过解串器解串为MIPI-CSI2接口协议数据,而后送入MIPI子系统处理;
将MIPI子系统进行接口数据处理完成后的视频帧数据,再进行格式转换、同步以及切片编码;
将编码完成的视频帧数据通过5G网络发送至远程平台端。
2.如权利要求1所述的一种低延迟视频处理方法,其特征在于,所述切片编码的步骤包括:
将采集的视频帧数据进行切片处理,得到多个分片,然后将任一所述分片进行编码;
将完成编码后的数据以片段的模式进行输出,在所述片段的每一端生成一个片段完成中断,并为片段输出流缓存,所述流缓存用于下一个元素处理,从而将视频编码时延,将多个片段逐帧减少。
3.如权利要求2所述的一种低延迟视频处理方法,其特征在于,然后将任一所述分片进行编码的步骤包括:
对接收到任一所述分片进行实时编码,所述实时编码无需等待完整的一帧的分片到来再进行编码。
4.如权利要求1所述的一种低延迟视频处理方法,其特征在于,将MIPI子系统进行接口数据处理完成后的视频帧数据,再进行格式转换、同步以及切片编码的步骤包括:
将MIPI子系统进行接口数据处理完成后的视频帧数据,送入编码操作的传输链路中采用DMA传输,并进行零拷贝处理。
5.一种低延迟视频处理系统,其特征在于,包括:
数据接收模块,用于通过LVDS摄像头采集的视频帧数据,并将所述视频帧数据通过解串器解串为MIPI-CSI2接口协议数据,而后送入MIPI子系统处理;
数据处理模块,用于将MIPI子系统进行接口数据处理完成后的视频帧数据,再进行格式转换、同步以及切片编码;
数据发送模块,用于将编码完成的视频帧数据通过5G网络发送至远程平台端。
6.如权利要求5所述的一种低延迟视频处理系统,其特征在于,
所述数据接收模块将采集的视频帧数据进行切片处理,得到多个分片,然后将任一所述分片送入所述数据处理模块中的编码模块进行编码;将完成编码后的数据以片段的模式进行输出,在所述片段的每一端生成一个片段完成中断,并为片段输出流缓存,所述流缓存用于下一个元素处理,从而将视频编码时延,将多个片段逐帧减少。
7.如权利要求5所述的一种低延迟视频处理系统,其特征在于,所述数据接收模块采用解串器与SOC(ARM+FPGA)芯片中的FPGAMIPI子系统的IP核进行对接;所述数据处理模块采用SOC(ARM+FPGA)芯片中的FPGA视频子系统VPSS以及编解码单元VCU的IP核进行处理。
8.一种低延迟视频处理装置,其特征在于,包括:LVDS摄像头、5G模块、远程平台以及用于运行如权利要求5至7任一项所述的低延迟视频处理系统的处理设备;所述处理设备通过输入端接口与LVDS摄像头进行通信,接收LVDS摄像头发送过来的视频帧数据,所述处理设备通过USB3.0控制器对接5G模块,将视频帧数据传输到5G网路,所述5G模块通过5G网络与远程平台端进行通信,将视频帧数据传送到远程平台端,所述远程平台端负责视频显示处理以及人机交互。
9.如权利要求8所述的一种低延迟视频处理装置,其特征在于,所述处理设备通过解串器以及SOC(ARM+FPGA)芯片进行数据接收、处理以及发送。
10.如权利要求8所述的一种低延迟视频处理装置,其特征在于,所述处理设备通过USB3.0控制器对接5G模块,并对数据包设置为MTU所适配的大小,实现视频帧数据的远程传输。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于感知信息科技(浙江)有限责任公司,未经感知信息科技(浙江)有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210287130.2/1.html,转载请声明来源钻瓜专利网。