[发明专利]婴儿视频自动剪辑的方法、装置、设备及存储介质

权利要求书

1.一种婴儿视频自动剪辑的方法，其特征在于，所述方法包括：

S1：提取待剪辑的婴儿视频中各关键帧，输出关键帧集合；

S2：将所述关键帧集合送入婴儿动作检测模型中，输出各所述关键帧中婴儿的动作类型标记和动作位置标记；

S3：根据各所述动作类型标记和各所述动作位置标记，输出各动作类型对应的目标关键帧；

S4：根据各所述目标关键帧对所述婴儿视频进行裁剪，输出与各动作类别对应的目标视频；

其中，所述S1包括:

S11：获取待剪辑的婴儿视频在HSV颜色空间的各图像帧；

S12：计算各图像帧的各通道的图像熵；

S13：根据各所述图像帧的各通道的图像熵，由公式：E=a*E(f(i_H))+b*E(f(i_s))+c*E(f(i_v))得到各所述图像帧的合熵；

S14：根据各所述图像帧的合熵，从所有所述图像帧中筛选出多个所述图像帧组成所述关键帧集合；

其中，所述S3包括：

S31：根据各关键帧的所述动作位置标记和所述动作类型标记，按所述动作类型标记给各关键帧分配动作位置坐标；

S32：根据各所述关键帧的所述动作位置坐标，由公式

输出所述婴儿视频中各视频段的居中度最小值的关键帧作为所述目标关键帧；

其中，a、b、c为常数， E表示图像帧的合熵，E(f(i_H))表示图像帧的通道H的图像熵，E(f(i_S))表示图像帧的通道S的图像熵，E(f(i_V))表示图像帧的通道V的图像熵，H为色调、S为饱和度、V为明度,R表示动作位置坐标，P_i中的i表示视频流中第i段视频，k表示第i段视频中包括k个关键帧，Center(j)表示k张关键帧中的第j张关键帧的图像中心点，Pi表示第i段视频的居中度最小值的关键帧，dis表示动作位置坐标到中心点的距离。

2.根据权利要求1所述的婴儿视频自动剪辑的方法，其特征在于，所述S14包括：

S141：获取用于筛选关键帧的图像帧数量Q；

S142：对各所述图像帧的合熵进行排序，输出合熵序列；

S143：根据所述图像帧数量Q和所述合熵序列，筛选出Q个所述图像帧组成的基准图像组；

S144：对所述基准图像组的各所述图像帧进行筛选，输出所述关键帧集合；

其中，Q为正整数。

3.根据权利要求2所述的婴儿视频自动剪辑的方法，其特征在于，所述S144包括：

S1441：对比所述基准图像组中各所述图像帧的合熵，输出最大合熵值对应的所述图像帧作为参考图像；

S1442：计算其余（Q-1）张各所述图像帧与所述参考图像的EMD值，得到与其余（Q-1）张各所述图像帧一一对应的各EMD值；

S1443：对各所述EMD值进行排序，输出EMD序列；

S1444：根据所述EMD序列以间隔（Q-1）/m进行一次EMD取值，将得到的m个EMD值对应的图像帧组成所述关键帧集合；

其中，m为大于等于1的正整数，且（Q-1）能被m整除，EMD（Earth Mover's Distance）值为图像帧与参考图像的向量相似度度量。

4.根据权利要求1至3任一项所述的婴儿视频自动剪辑的方法，其特征在于，所述S31包括：

S311：获取各关键帧中对应的人体所有骨骼关键点；

S312：将各关键帧中对应的所有骨骼关键点围成一封闭的几何图形；

S313：将与各关键帧一一对应的所述几何图形中心的坐标作为所述动作位置坐标。