[发明专利]经由单次学习的群体分析法

说明书

本发明提供用于基于图像数据分析评定个体或群体层面行为的技术。举例来说，在一个实施例中，所述技术可以包括基于视频数据产生表示观察到的行为的特征标志，以及通过确定所述第一特征标志是否匹配指示查询行为的第二特征标志来执行成对匹配。

技术领域

本发明涉及经由单次学习的群体分析法。

背景技术

对个体层面或群体层面行为的理解是一个重要的研究领域，并且可能促进行为检测。对个人行为进行检测可以实现减少犯罪，和/或增强群体通常聚集的各种位置，例如，机场、火车站、体育馆、电影院等的安全性。现在普遍认识到，用来在个人进行某一行为之前检测所述行为的改进技术是合乎需要的。

发明内容

范围与最初要求保护的主题相一致的某些实施例总结如下。这些实施例不希望限制要求保护的主题的范围，相反，这些实施例仅希望提供本发明的可能形式的简短总结。实际上，所公开的技术可以涵盖可能类似于或不同于下文所述实施例的各种形式。

在一个实施例中，提供一种包括以下步骤的方法：从环境中的一个或多个相机接收数据；产生从数据产生的一个或多个视频分析流的元数据；基于元数据产生值的一个或多个时间序列；产生一个或多个时间序列的一个或多个情绪评分；基于一个或多个情绪评分产生表示观察到的行为的第一特征标志；通过确定第一特征标志是否匹配指示查询行为的第二特征标志来执行成对匹配；以及当第一特征标志匹配第二特征标志时，执行动作。

优选的，其中成对匹配是在获得查询行为的例子的仅单个观察结果之后执行。

优选的，其中成对匹配包括根据以下表达式推导成对匹配评分：

其中d为距离测量，b为观察到的行为，sg为信号产生器，n为信号产生器的数目，且w为与每一信号产生器相关联的权重。

优选的，其中一个或多个相机包括捕获位置和肢体运动的估计的红绿蓝深度(RGB+D)相机，以及捕获面部成像的固定相机和摇摄俯仰变焦(PTZ)相机。

优选的，其中视频分析流包括对个体的地点坐标位置、个体的运动特征标志、个体的表情概况、个体的视线方向或其某一组合进行编码的个人描述符集合。

优选的，其中视频分析流是通过以下操作产生：经由一个或多个相机跟踪个体；基于空时兴趣点产生每一个体的运动特征标志；使用一个或多个相机来捕获面部图像；以及基于面部图像来估计面部表情和视线方向。

优选的，其中时间序列中的值介于0到1的范围内。

优选的，其中一个或多个情绪评分介于0到1的范围内。

优选的，其中元数据、值的一个或多个时间序列、一个或多个情绪评分和特征标志的产生是由信号产生器组模块执行。

优选的，其中执行动作包括在第一特征标志匹配第二特征标志时，发出声音报警、呼叫紧急服务、触发警报、发送消息、显示警报，或其某一组合。

在另一实施例中，提供一种有形的非暂时性计算机可读媒体。有形的非暂时性计算机可读媒体存储计算机指令，指令在由一个或多个处理器执行时使得一个或多个处理器：从环境中的一个或多个相机接收数据；产生从数据产生的一个或多个视频分析流的元数据；基于元数据产生值的一个或多个时间序列；产生一个或多个时间序列的一个或多个情绪评分；基于一个或多个情绪评分产生表示观察到的行为的第一特征标志；通过确定第一特征标志是否匹配指示查询行为的第二特征标志来执行成对匹配；以及当第一特征标志匹配指示查询行为的第二特征标志时，提供输出。

优选的，其中成对匹配是在获得查询行为的例子的仅单个观察结果之后执行。