[发明专利]视频传输方法、装置及系统

说明书

本发明提供一种视频传输方法、装置及系统，属于人工智能技术领域。该视频传输方法应用于客户端，包括：提取视频的类型特征，根据类型特征确定视频类型；将视频输入视频类型对应的预设语义分割网络模型中，得到核心区域信息；根据核心区域信息对视频进行区域划分并向各区域分配对应的采样率；按照各区域对应的采样率将各区域的视频采样上传至服务器。本发明可以自适应地调整传输码率和视频内容欠采样率，从而增强在线视频对传输网络波动的抗干扰能力，提升低带宽等恶劣网络状况下的视频质量，改善用户体验。

技术领域

本发明涉及人工智能技术领域，具体地，涉及一种视频传输方法、装置及系统。

背景技术

随着移动通信技术和智能终端设备的迅猛发展，在线音视频业务的应用场景在广度和深度上得到了极大的拓展。新兴音视频技术，例如实时直播和虚拟现实(VR)深刻改变了人们的生活方式，孵化了一批全新的产业。在金融行业，在线音视频平台赋能了一些新颖技术，例如远程金融面审和基于声纹、视频的生物识别等，为客户提供了更加高效、优质、安全的服务，为面向未来的数字化银行、智慧金融提供了坚实的技术基础。

然而，由于在线音视频的应用场景越来越多样化，移动网络通信质量的波动成为了影响用户体验的主要因素之一。在一些特殊场景，例如高速移动的交通工具(高铁和汽车)、信号阻隔严重的封闭空间(地下室和电梯轿厢)、移动通信基站覆盖边缘区域和用户高度聚集场合(体育馆)，移动网络质量会出现明显恶化，具体体现在通信带宽的降低和网络延时的提高。因此，如何提升恶劣通信环境下的在线音视频质量，为用户提供稳定、可靠、优质的体验，成为了一个重要而亟待解决的课题。

码率自适应技术通过实时监测用户当前的网络状况和缓冲情况动态调整下一个视频小切片的码率，从而实现更少的缓存和更好的视频质量，是解决低带宽条件下在线音视频传输问题的有效手段。但是，现有技术是建立在对相关参数的假设上，不适用于难以预测的复杂网络环境。

欠采样是另一种低带宽条件下传输音视频内容时常用的技术手段。传统的欠采样技术对图像全部内容采用统一的低于奈奎斯特频率的采样率，还原后的图像在信息损失的空间分布上是均匀的。然而，不同空间区域的视频内容在重要程度上往往有区别。比如在以人像为核心的音视频内容中，相较于背景内容，人们更加关心人像区域的清晰程度。如果能够根据不同区域视频内容的重要性采用差异化的采样率，即针对关键区域信息进行过采样，针对非关键区域信息进行欠采样，用户可以在有限的带宽条件下或者更好的体验。

发明内容

本发明实施例的主要目的在于提供一种视频传输方法、装置及系统，以自适应地调整传输码率和视频内容欠采样率，从而增强在线视频对传输网络波动的抗干扰能力，提升低带宽等恶劣网络状况下的视频质量，改善用户体验。

为了实现上述目的，本发明实施例提供一种应用于客户端的视频传输方法，包括：

提取视频的类型特征，根据类型特征确定视频类型；

将视频输入视频类型对应的预设语义分割网络模型中，得到核心区域信息；

根据核心区域信息对视频进行区域划分并向各区域分配对应的采样率；

按照各区域对应的采样率将各区域的视频采样上传至服务器。

本发明实施例还提供一种应用于客户端的视频传输装置，包括：

视频类型模块，用于提取视频的类型特征，根据类型特征确定视频类型；

核心区域模块，用于将视频输入视频类型对应的预设语义分割网络模型中，得到核心区域信息；

采样率分配模块，用于根据核心区域信息对视频进行区域划分并向各区域分配对应的采样率；

视频上传模块，用于按照各区域对应的采样率将各区域的视频采样上传至服务器。