[发明专利]一种基于终端设备和边缘服务器协同进行视频流处理的方法

权利要求书

1.一种基于终端设备和边缘服务器协同进行视频流处理的方法，其特征在于，所述的视频流处理划分为数据预处理、深度神经网络推理和结果处理三个阶段，所述的终端设备的计算任务分为数据预处理TP、数据传输TD_t、神经网络推理TI、结果接收TR_r和结果处理TF，所述的边缘服务器的计算任务分为数据接收ED_r、深度神经网络推理EI，结果传输ER_t，所述的视频预处理采用流水化方式进行任务调度，终端设备按照任务优先级，根据空闲状态执行计算任务，边缘服务器也根据任务优先级的顺序执行；

其中，

终端设备承担任务的优先级从高到低排序为：TR_r TD_t TF TP = TI；

边缘服务器承担任务的优先级从高到低排序为：ED_rEIER_t；

所述的采用流水化方式进行任务调度的具体步骤如下：

S1：终端设备首先对第1帧数据进行预处理，并将预处理后的第1帧数据发送给边缘服务器处理，边缘服务器接收预处理后的第1帧数据，所述的发送和接收同步进行；

S2：边缘服务器接收到第1帧数据后，进入深度神经网络推理阶段，在边缘服务器进行第1帧数据推理的同时，终端设备进行第2~1+m数据帧的预处理，直到待处理数据队列满或有更高优先级的计算任务到来，当待处理数据队列已满且无更高优先级的计算任务到来时，进行第m+2帧数据的深度神经网络推理；当更高优先级的计算任务到来时，暂停当前任务，优先执行更高优先级的计算任务；其中m为终端设备的待处理队列的深度；

S3：边缘服务器完成第一帧数据的神经网络推理运算后，将计算结果发送给终端设备，然后按照优先级顺序执行任务；

S4：终端设备和边缘服务器按照S2-S3的规则协同计算直到完成全部计算任务。

2.根据权利要求1所述的基于终端设备和边缘服务器协同进行视频流处理的方法，其特征在于，终端设备在进行数据预处理过程中为降低待传输数据量对数据进行压缩的压缩比大于1。