[发明专利]一种视频摘要提取方法及其系统、装置、存储介质

权利要求书

1.一种视频摘要提取方法，其特征在于，包括：

将原始视频解码得到帧图像；

根据时间消耗从小到大依次使用不同的帧图像特征提取算法进行视频分割，得到分割的时序片段；

对每个时序片段提出的候选视频摘要进行特征提取，选择关键帧输出；

对关键帧进行聚类，生成最终视频摘要；

其中，所述根据时间消耗从小到大依次使用不同的帧图像特征提取算法进行视频分割具体包括：根据时间消耗从小到大依次使用Hash算法、HSV颜色特征提取算法以及ORB算法。

2.根据权利要求1所述的一种视频摘要提取方法，其特征在于，所述将原始视频解码得到帧图像，包括：

将原始视频解码成帧进行预采样得到需要的帧图像，在此过程中丢弃解码失败以及结尾处存在的空帧。

3.根据权利要求1所述的一种视频摘要提取方法，其特征在于，所述帧图像特征提取算法包括用于帧图像特征初步聚类的Hash算法、用于帧图像特征二次聚类的HSV算法和用于帧图像特征三次聚类的ORB算法，所述HSV算法中，提取帧图像的HSV颜色特征，取H通道及S通道生成颜色直方图，舍弃HSV颜色直方图中的V通道。

4.根据权利要求3所述的一种视频摘要提取方法，其特征在于，所述根据时间消耗从小到大依次使用不同的帧图像特征提取算法进行视频分割，得到分割的时序片段，包括：

根据时间消耗从小到大依次使用Hash算法、HSV算法以及ORB算法对帧图像进行分层聚类，逐层减少需要处理的帧图像，得到分割的时序片段。

5.根据权利要求4所述的一种视频摘要提取方法，其特征在于，所述对每个时序片段提出的候选视频摘要进行特征提取，选择关键帧输出，包括：

统计二次聚类中时序片段所含颜色信息最多的局部极值帧以及三次聚类中时序片段特征点最多的局部极值帧并提取作为关键帧输出。

6.根据权利要求1所述的一种视频摘要提取方法，其特征在于，所述对关键帧进行聚类，生成最终视频摘要，包括：

使用欧氏距离对关键帧提取全局特征进行聚类，并在同类中选出局部最具代表性的帧作为静态视频摘要进行输出。

7.一种视频摘要提取系统，其特征在于，包括：

视频解码单元，用于将原始视频解码得到帧图像；

视频分割单元，用于根据时间消耗从小到大依次使用不同的帧图像特征提取算法进行视频分割，得到分割的时序片段；

关键帧选取单元，用于对每个时序片段提出的候选视频摘要进行特征提取，选择关键帧输出；

生成视频摘要单元，用于对关键帧进行聚类，生成最终视频摘要；其中，所述视频分割单元用于根据时间消耗从小到大依次使用不同的帧图像特征提取算法进行视频分割，得到分割的时序片段，具体包括：根据时间消耗从小到大依次使用Hash算法、HSV颜色特征提取算法以及ORB算法。

8.一种视频摘要提取装置，其特征在于，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如权利要求1-6任一项所述的方法。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行如权利要求1-6任一项所述的方法。