[发明专利]一种基于海量视频的快速特征提取系统

摘要

本发明适用于视频监控技术领域，提供了一种基于海量视频的快速特征提取系统，包括：海量视频分析深度应用模块A、海量视频分析应用服务模块B、海量视频源模块C、视频大数据处理模块D和基础资源模块E。其中视频大数据处理模块D包括算法控制模块F、任务切分模块G、算法注入模块H、任务调度模块I和数据存储K。视频大数据处理模块D在接收作业任务后，根据视频源信息调用任务切分模块G对作业切分并封装成小任务；通过任务调度模块I将小任务下发到各个集群分析节点，分析节点通过算法控制模块F和算法注入模块H对视频切片进行分析；通过部署多个相对低性能服务器进行分布式处理，大大降低了成本和带宽要求。

主权项

1.一种基于海量视频的快速特征提取系统，其特征在于，所述系统包括：海量视频分析深度应用模块(A)、海量视频分析应用服务模块(B)、海量视频源模块(C)、视频大数据处理模块(D)和基础资源模块(E)；所述海量视频分析深度应用模块(A)向用户提供海量视频的快速特征提取服务，根据登录用户的权限信息，接收用户下发的作业任务；所述海量视频分析应用服务模块(B)通过webservice向所述海量视频分析深度应用模块(A)提供服务接口，对所述系统各节点进行监控，同时将所述海量视频分析深度应用模块(A)下达的作业任务下发给所述视频大数据处理模块(D)；所述海量视频源模块(C)向所述视频大数据处理模块(D)提供视频数据获取的接口；所述视频大数据处理模块(D)包括算法控制模块(F)、任务切分模块(G)、算法注入模块(H)、任务调度模块(I)和数据存储模块(K)；所述视频大数据处理模块(D)在接收到所述作业任务后，根据视频源信息调用所述任务切分模块(G)对作业切分并封装成小任务；通过所述任务调度模块(I)将所述小任务下发到各个集群分析节点，所述分析节点通过所述算法控制模块(F)和所述算法注入模块(H)对视频切片进行分析；所述分析节点将处理结果汇聚到存储集群中的所述数据存储模块(K)中存储；所述存储集群为所述海量视频分析应用服务模块(B)提供分析结果的快速检索功能；所述基础资源模块(E)包括IT基础资源，所述IT基础资源包括网络资源、节点物理机资源和存储设备；所述任务调度模块(I)通过维护优先级队列、任务监控链表和轮转调度模块(I5)进行任务调度；所述优先级队列包括至少两个的不同优先级的队列，所述任务切分模块(G)对作业进行切分后，根据用户的优先权限将任务插入到对应的优先级队列中；当收到各分析节点的任务请求，所述轮转调度模块(I5)依次从不同优先级的优先级队列中获取不同个数的任务，所述优先级队列的优先级越高，获取的任务的个数越多；周期轮转将任务下发到各个所述分析节点。