[发明专利]视频传输控制方法及装置、设备、存储介质

权利要求书

1.一种视频传输控制方法，其特征在于，包括：

在发送端向接收端传输视频的过程中，获取已发送视频帧的状态数据，所述状态数据用于描述所述已发送视频帧的发送和接收状态；

将获取的状态数据输入至码率值预测模型中，所述码率值预测模型中含有神经网络和决策网络，所述神经网络用于对所述状态数据进行特征提取，所述决策网络用于根据所述神经网络输出的状态数据所对应特征进行自适应码率决策；

获取所述决策网络输出的码率预测结果，所述码率预测结果包括不同码率值对应的选择概率，将最大选择概率对应的码率值确定为与接收端在下一预测时间段所对应网络状态相适配的码率值，所述码率值用于控制所述发送端在所述下一预测时间段内发送视频帧；

控制所述发送端根据所述码率值发送响应于接收端操作指令的视频帧，使所述接收端实时获得响应于所述操作指令的视频帧画面；

通过不断获取的所述状态数据，迭代执行所述码率值的预测以及控制所述发送端根据预测的码率值发送响应于接收端操作指令的视频帧，直至停止进行视频传输，其中，所述码率值预测模型中还含有评判网络，在所述码率值预测模型进行一次码率值预测，并将预测得到的码率值应用至下一预测时间段的视频帧发送之后，通过所述评判网络根据获取到的状态数据计算上一预测时间段所预测码率值对应的奖励值，调整进行码率值预测的预测参数，所述奖励值用于表征上一预测时间段进行码率值预测的效果，调整得到的预测参数用于预测适配于下一预测时间段内接收端网络状态的码率值。

2.根据权利要求1所述的方法，其特征在于，所述根据所述状态数据，计算上一预测时间段所预测码率值对应的奖励值，包括：

根据所述状态数据，获取所述预测时间段内传输视频帧的卡顿时间，以及获取所述发送端在上一预测时间段内发送视频帧的码率值；

计算所述发送端在所述上一预测时间段内发送视频帧的码率值，与所述上一预测时间段预测的码率值之差，得到波动码率；

根据所述上一预测时间段所预测的码率值、所述卡顿时间和所述波动码率计算所述奖励值。

3.根据权利要求2所述的方法，其特征在于，所述根据所述状态数据，获取所在预测时间段内传输视频帧的卡顿时间，包括：

根据所在预测时间段内已发送视频帧的状态数据，确定所述接收端发送操作指令的第一时间，以及确定所述接收端获取到响应于所述操作指令的视频帧的第二时间；

计算所述第二时间与所述第一时间之间的时间差，获得所述卡顿时间。

4.根据权利要求2所述的方法，其特征在于，在根据所述上一预测时间段所预测的码率值、所述卡顿时间和所述波动码率计算所述奖励值之前，所述方法还包括：

根据所在预测时间段对应的卡顿时间，调整所述卡顿时间在所述奖励值计算中的权重，以根据调整后的权重进行所述上一预测时间段所对应奖励值的计算。

5.根据权利要求4所述的方法，其特征在于，所述根据所在预测时间段对应的卡顿时间，调整所述卡顿时间在所述奖励值计算中的权重，包括：

获取所述上一预测时间段进行奖励值计算中的权重；

如果所在预测时间段对应的卡顿时间小于预设的时间阈值，将所述权重调小设定数值；

否则，将所述权重增大所述设定数值。

6.根据权利要求1所述的方法，其特征在于，所述控制所述发送端根据所述码率值发送响应于接收端操作指令的视频帧，包括：

控制所述发送端根据接收的接收端操作指令生成响应于所述操作指令的视频帧；

将生成的视频帧按照预测的所述码率值重新编码，并将重新编码得到的视频帧发送至所述接收端。

7.根据权利要求6所述的方法，其特征在于，所述码率值的预测由所述发送端执行；所述将生成的视频帧按照预测的所述码率值重新编码，并将重新编码得到的视频帧发送至所述接收端，包括：

控制所述发送端将生成的视频帧按照自身预测的所述码率值重新编码，并将重新编码得到的视频帧发送至所述接收端。