[发明专利]一种3D全景音视频直播系统及音视频采集方法

说明书

本发明公开了一种3D全景音视频直播系统及音视频采集方法。该3D全景音视频直播系统包括音视频采集设备、服务器以及多个用户终端。音视频采集设备用于硬件同步采集多路原始视频数据以及多路原始音频数据，对多路原始视频数据以及多路原始音频数据进行处理，获得3D全景音视频数据，并将3D全景音视频数据推流到服务器；服务器接收音视频采集设备推流的3D全景音视频数据，将3D全景音视频数据进行转码处理，并将转码后的3D全景音视频数据分发给用户终端；用户终端从服务器实时获取转码后的3D全景音视频数据，并实时直播转码后的3D全景音视频数据。本发明实施例可以提高画质的清晰度、减小图像畸变，实现多路视频数据与多路音频数据的硬件同步采集。

技术领域

本发明涉及音视频处理技术领域，尤其涉及一种3D全景音视频直播系统及音视频采集方法。

背景技术

随着计算机技术、微电子技术、光学技术以及多媒体技术的飞速发展，人们信息交流互通的需求不断加大，信息沟通方式革新的需求更是与日俱增，传统的单个摄像头进行音视频信息采集和网络传输到远程的方式进行可视对讲等等的方式已经不满足人们日益增长无死角的图像视频信息采集的需求，一种突破传统，带给用户720度无死角沉浸式体验的全景音视频采集设备应运而生。

目前，全景音视频采集设备主要分为两大类，第一类是采用双目摄像头方案，即两个摄像头模组背靠背放置或者水平方向错位放置，第二类则是多个摄像头方案，即多目摄像头模组自由排布使得能够无死角采集。然而实践中发现，第一类存在着像素密度不够、图像畸变较大和画质不清晰等问题，第二类无法进行多个摄像头的视频数据帧同步，这两类全景音视频采集设备采集的视频数据都给全景视频的拼接带来影响。可见，如何实现一种图像畸变比较小、画质清晰、多个摄像头采集且同步性好的全景音视频采集系统是一个亟待解决的技术难题。

发明内容

本发明实施例提供了一种3D全景音视频直播系统及音视频采集方法，可以提高画质的清晰度、减小图像畸变，同时，实现多路视频数据与多路音频数据的硬件同步采集。

本发明实施例第一方面公开了一种3D全景音视频直播系统，包括：音视频采集设备、服务器以及多个用户终端，其中：

所述音视频采集设备，用于硬件同步采集多路原始视频数据以及多路原始音频数据，对所述多路原始视频数据以及所述多路原始音频数据进行处理，获得3D全景音视频数据，并将所述3D全景音视频数据推流到所述服务器；

所述服务器，用于接收所述音视频采集设备推流的所述3D全景音视频数据，将所述3D全景音视频数据进行转码处理，以及将转码后的3D全景音视频数据分发给所述用户终端；

所述用户终端，用于从所述服务器实时获取所述转码后的3D全景音视频数据，并实时直播所述转码后的3D全景音视频数据。

本发明实施例中，音视频采集设备硬件同步采集来自多路摄像头模组的原始视频数据以及硬件同步采集来自多路拾音器的原始音频数据，在对该原始视频数据以及原始音频数据进行处理后获得3D全景音视频数据，实现了多路视频数据与多路音频数据的硬件同步采集，同时，多路高清摄像头模组输入的视频数据能够支持更高像素和清晰度，使得图像畸变大大减小，同时像素稀释度大大降低，最终使得拼接的全景视频质量增高，这样，用户终端直播3D全景音视频数据时将会有更高的像素和清晰度，图像畸变也会减小，从而可以提高画质的清晰度、减小图像畸变，提高用户体验。

本发明实施例第二方面公开了一种音视频采集方法，包括：

硬件同步采集来自多路摄像头模组的原始视频数据；

硬件同步采集来自多路拾音器的原始音频数据；

对所述原始视频数据以及所述原始音频数据进行处理，获得3D全景音视频数据。