[发明专利]一种实时视频处理方法、装置、电子设备及存储介质

说明书

本申请提供一种实时视频处理方法、装置、电子设备及存储介质，用于改善直播场景中播放实时视频流的延迟较高的问题。该方法包括：判断是否与终端设备建立点对点连接；若是，则获取实时视频流，并向终端设备发送实时视频流。在上述方案的实现过程中，通过点对点与终端设备已经建立连接的情况下，直接获取实时视频流，并向终端设备发送实时视频流，从而避免了使用服务器进行中转和转码后，再向其他终端发送转码后的实时视频流的情况，通过点对点通道向终端设备直接发送实时视频流，能够有效地减小直播场景中播放实时视频流的延迟。

技术领域

本申请涉及网络通信、图像处理和视频处理的技术领域，具体而言，涉及一种实时视频处理方法、装置、电子设备及存储介质。

背景技术

在实时视频处理的场景(例如直播场景)中，在通过摄像头获取实时视频流之后，需要先将实时视频流发送给服务器，以使服务器对实时视频流进行转码，获得转码后的实时视频流，并为其它终端设备提供实时视频流服务，即在其它终端设备请求直播场景中的实时视频流时，服务器向其它终端设备发送转码后的实时视频流。然而在具体的实践过程中发现，直播场景中播放实时视频流的延迟较高。

发明内容

本申请实施例的目的在于提供一种实时视频处理方法、装置、电子设备及存储介质，用于改善直播场景中播放实时视频流的延迟较高的问题。

第一方面，本申请实施例提供了一种实时视频处理方法，包括：判断是否与终端设备建立点对点连接；若是，则获取实时视频流，并向终端设备发送实时视频流。在上述方案的实现过程中，通过点对点与终端设备已经建立连接的情况下，直接获取实时视频流，并向终端设备发送实时视频流，从而避免了使用服务器进行中转和转码后，再向其他终端发送转码后的实时视频流的情况，通过点对点通道向终端设备直接发送实时视频流，能够有效地减小直播场景中播放实时视频流的延迟。

在第一方面的一种可选实现方式中，在判断是否与终端设备建立点对点连接之后，还包括：若没有与终端设备建立点对点连接，则向服务器发送实时视频流，以使服务器对实时视频流进行转码，获得转码后的视频流，并向终端设备发送转码后的视频流。在上述方案的实现过程中，通过在没有与终端设备建立点对点连接的情况下，就直接向服务器发送实时视频流，以使服务器对实时视频流进行转码，获得转码后的视频流，并向终端设备发送转码后的视频流，从而避免了在无法与终端设备建立的复杂网络情况下终端设备无法播放实时视频流的情况，有效地保证了在无法与终端设备建立的复杂网络情况下，终端设备也能够播放实时视频流。

在第一方面的一种可选实现方式中，判断是否与终端设备建立点对点连接，包括：在向终端设备发送点对点确认连接请求之后，判断是否接收到终端设备发送的确认连接请求对应的确认连接响应；若是，则确定已与终端设备建立点对点连接，否则，确定没有与终端设备建立点对点连接。在上述方案的实现过程中，通过确认连接请求对应的确认连接响应来确认是否与终端设备建立点对点连接，从而避免了难以确认是否与终端设备建立点对点连接的情况，通过点对点通道向终端设备直接发送实时视频流，能够有效地减小直播场景中播放实时视频流的延迟。

在第一方面的一种可选实现方式中，获取实时视频流，包括：接收媒体采集设备发送的视频帧数据；将视频帧数据进行解码处理和编码处理，获得实时视频流。在上述方案的实现过程中，通过接收媒体采集设备发送的视频帧数据，并将视频帧数据进行解码处理和编码处理，从而避免了未经解码处理和编码处理的视频帧数据无法播放的情况，有效地保证了解码处理和编码处理的视频帧数据也能够被实时播放。

在第一方面的一种可选实现方式中，视频帧数据是RTSP格式的帧数据；将视频帧数据进行解码处理和编码处理，包括：将RTSP格式的帧数据解码为图片格式的图片流，获得解码后的图片流；将解码后的图片流编码为预设编码格式的视频流，获得实时视频流。在上述方案的实现过程中，通过将RTSP格式的帧数据解码为图片格式的图片流，获得解码后的图片流，并将解码后的图片流编码为预设编码格式的视频流，从而使得解码后的图片流能够被AI图像处理算法进行处理，提高了解码后的图片流被有效使用的概率。