[发明专利]行为识别系统

权利要求书

1.一种用于对记录场景内的事件的视频帧的流进行处理的方法，所述 方法包括：

接收所述流的第一帧，其中，所述第一帧包括用于该帧中所包括的多 个像素的数据；

在所述第一帧中识别出一组或多组像素，其中，每组像素描述所述场 景内的一个对象；

生成存储与每个所识别出的对象相关联的一个或多个特征的搜索模 型；

使用经过训练的分类器来对所述对象中的每一个对象进行分类；

使用所述搜索模型在第二帧中跟踪所述第一帧中所识别出的所述对象 中的每一个对象；

将所述第一帧、所述第二帧和对象分类提供给机器学习引擎；以及

由所述机器学习引擎生成对在多个帧的所述场景中由所述对象涉及的 行为的一个或多个语义表示，其中，所述机器学习引擎被配置为学习在所 述多个帧的所述场景中观察到的行为模式，并且识别由分类后的对象涉及 的行为模式的发生。

2.根据权利要求1所述的方法，还包括：发布至少一种警告，所述至 少一种警告指示由所跟踪的对象中的一个对象进行的所识别出的行为模式 中的一种行为模式的发生。

3.根据权利要求1所述的方法，其中，每个搜索模型被生成为外观模 型和基于特征的模型中的一种。

4.根据权利要求1所述的方法，其中，使用所述搜索模型在所述第二 帧中跟踪所述第一帧中所识别出的对象中的每一个对象的步骤包括：

在所述第二帧中定位所识别出的对象；以及

针对每个所识别出的对象更新相应的搜索模型。

5.根据权利要求1所述的方法，其中，所述经过训练的分类器被配置 为将每个对象分类成人、汽车或其它中的一种。

6.根据权利要求1所述的方法，其中，在所述第一帧中识别出一组或 多组像素的步骤包括：

识别表示所述第一帧中的前景区域的至少一组像素和表示所述第一帧 中的背景区域的至少一组像素；

将前景区域分割成多个前景斑点，其中，每个前景斑点表示所述第一 帧中所描述的对象；以及

基于所述第一帧中所识别出的背景区域来更新所述场景的背景图像。

7.根据权利要求6所述的方法，还包括：

使用生成搜索模型的步骤的结果来更新由所述视频流描述的场景的注 释图，其中所述搜索模型存储与每个所识别出的对象相关联的一个或多个 特征；

使用经过训练的分类器来对所述对象中的每一个对象进行分类；并且

使用所述搜索模型在所述第二帧中跟踪所述第一帧中所识别出的所述 对象中的每一个对象，其中，所述注释图描述所述场景的三维几何图形， 所述三维几何图形包括所识别出的对象的估计出的三维位置和所述场景的 背景图像中所描述的多个对象的估计出的三维位置，并且其中，建立语义 表示的步骤还包括：使用潜在语义分析来分析所建立的针对可识别的行为 模式的语义表示。