[发明专利]一种面向抽检的多工位监控视频语义检索系统

摘要

本发明请求保护一种面向抽检的多工位监控视频语义检索系统，属于视频数据处理和语义Web技术领域。该系统的整体架构包括：原始数据层、数据处理层、语义层、服务层和应用层。原始数据层包括产品生产流水线现场各工位的监控视频和用来训练的样本视频库。数据处理层包括样本视频处理模块和监控视频处理模块。语义层包括视频语义标注模块、视频信息语义化模块、视频领域知识本体模型、语义推理和查询模块、本体数据库和语义规则文件。服务层包括视频查询服务和权限检测服务。应用层包括视频检索模块、视频回放模块、用户权限模块。本发明可在抽检中对某一产品生产流水线上各工位的监控视频进行语义检索，提高抽检效率。

主权项

1.一种面向抽检的多工位监控视频语义检索系统，其特征在于，该系统的整体架构包括：原始数据层、数据处理层、语义层、服务层和应用层，原始数据层将采集到的监控视频数据传给数据处理层，数据处理层将处理后的监控视频特征数据传给语义层，语义层将进行语义处理之后的数据传递给服务层，服务层将数据传递给应用层，其中：所述原始数据层包括某产品生产流水线上各工位的监控视频和用来进行训练的样本视频库，流水线上各工位安装有CCD视觉检测装置，通过该CCD视觉检测装置对产品生产过程中经过各个工位的视频进行采集，样本视频库也是通过CCD视觉检测装置采集得到的视频库作为样本；所述数据处理层包括样本视频处理模块和监控视频处理模块；样本视频处理模块，用于对样本视频进行视频底层视觉处理；监控视频处理模块，用于对视觉检测装置采集到的各工位的监控视频同样地进行视频底层视觉处理；所述语义层包括视频语义标注模块、视频信息语义化模块、视频领域知识本体模型、语义推理和查询模块、本体数据库和语义规则文件；其中所述视频语义标注模块，利用基于改进的半监督式机器学习的视频标注方法来对视频进行标注，其中改进了一种协同训练分类器算法，通过增加一个分类器并采用低通滤波的方式去除孤立错分的结果，使语义标注的标准率和标全率有所提高；所述视频信息语义化模块，通过监控视频语义分析本体将经过视频语义标注模块标注后的结果转换为RDF资源描述框架数据，实例化存储入图形数据库中；所述视频领域知识本体模型是视频领域共享概念模型的形式化规范说明；所述语义推理和查询模块用于处理应用层的查询和推理请求；所述本体数据库用于存放视频相关的本体模型和语义数据；所述语义规则文件用于存放与监控视频检索所需推理相关的规则；所述服务层包括视频查询服务和权限检测服务；所述应用层包括视频检索模块、视频回放模块、用户权限模块；其中，所述视频检索模块，用于对某产品生产流水线上产品经过各工位的监控视频进行检索，通过数据处理层和语义层将各工位监控视频的标注结果存入AllegroGraph图形数据库中，并通过SPARQL查询返回应用层的查询请求，供质检人员在抽检过程中对某一个产品生产过程中经过各个工位的监控视频的检索；所述视频回放模块可以供质检人员进行生产视频回放；所述用户权限模块通过分析当前用户登录状态是否满足质检人员的要求来限制该用户能否登录该系统。