[发明专利]一种视音频智能分析管控系统

权利要求书

1.一种视音频智能分析管控系统，其特征在于，包括：

视音频特征数据库，包含多种目标和/或行为模型特征；

视音频采集模块，用于对采集的视音频信号进行处理，获取数字视频序列和数字音频序列；

视音频质量提升模块，用于对数字视频序列和数字音频序列进行质量提升；

视音频特征提取模块，用于分别对数字视频序列和数字音频序列进行特征提取、特征匹配、特征分类；

视音频特征识别模块，根据用户设定的参数，将视频对象、音频对象与多种目标和/或行为模型库进行比对；

视音频管控触发规则判断模块，根据用户事先设定好的规则和景深，结合视频特征和音频特征，判断规则是否被打破，如果打破了规则发出异常信息；

视音频实时管控平台，用于接收视音频分析结果，并根据分析结果发布管控命令。

2.根据权利要求1所述的视音频智能分析管控系统，其特征在于，所述的视音频特征数据库包括：

数据采集子模块，用于采集不同角度、不同环境的图片作为目标和/或行为样本库；

数据标定子模块，用于对采集得到的样本图片进行标定分类；

数据训练子模块，用于对采集的样本图片进行特征提取，并根据采集并标定好类别的样本图片及图片的特征进行分类训练；

特征比对子模块，当输入新的待测图片时，首先提取其特征，然后将这些特征输入训练好的分类器，即得出分类结果。

3.根据权利要求1所述的视音频智能分析管控系统，其特征在于：

所述的视音频采集模块，原始输入视频信号可以是来自摄像机、录像或其他设备任意分辨率的模拟视频信号或通过网络传输而 来的编码视频流；原始输入音频信号可以是模拟音频或数字音频流；

所述的视音频采集模块，分别对视音频信号进行数据处理，如果输入是模拟信号，首先要经A/D转换为数字信号；如果输入是编码流，经解码器进行解码，并转换成需要的格式。

4.根据权利要求1所述的视音频智能分析管控系统，其特征在于，所述的视音频质量提升模块包括：

噪声去除子模块，使用可调阿尔法均值滤波器对视频序列、音频序列进行噪声去除；

信号增强子模块，使用可调幂变换方法对视频序列、音频序列进行信号增强。

5.根据权利要求1所述的视音频智能分析管控系统，其特征在于，所述的视音频特征提取模块分为并行两支：

对于视频序列，所述视音频特征提取模块包括：

视频图像前景提取子模块，用于提取视频图像的前景；对于镜头固定的场景，采用帧差法得到前景，也可以采用基于高斯模型或码本法建立背景模型，将每一帧输入图像与背景画面做比较从而得到前景，同时对背景画面进行更新；对于镜头移动的场景，采用光流法直接得到前景；

视频目标匹配跟踪子模块，用于对视频序列进行目标匹配，使用轮廓特征和多维联合直方图特征相结合有效且准确的进行目标匹配；

视频目标分类子模块，用于对视频对象进行目标分类；

对于音频序列，所述视音频特征提取模块包括：

语音提取子模块，用于提取语音特征；

语音匹配子模块，用于对音频序列进行目标匹配，将音频序列提取出的特征与之前的语音对象进行匹配得到语音对象，并更新语音对象特征；

语音分类子模块，用于对音频对象进行分类。

6.根据权利要求1所述的视音频智能分析管控系统，其特征在于，所述的视音频管控触发规则判断模块用于进行管控触发规则判断，根据用户事先设定好的规则和景深、灵敏度、最大最小像素、 场景类型，判断视频状态或结合视频特征、音频特征判断特定事件是否发生。

7.根据权利要求1所述的视音频智能分析管控系统，其特征在于，所述的视音频实时管控平台接收视音频分析结果，根据分析结果发布各种管控命令；同时，管控平台负责输出视音频采集命令、为终端智能分析配置系统参数和规则参数、对视音频数据进行浏览、存储、检索工作。

8.根据权利要求1所述的视音频智能分析管控系统，其特征在于，所述的视音频智能分析管控系统，在前端进行视音频信号采集之后，即可在前端对视音频信息进行数据处理、特征提取、特征识别、管控触发规则判断处理，并将分析结果发送到后端，后端根据分析结果发布管控命令。