[发明专利]用于生成可搜索的真实场景数据库的系统

说明书

技术领域

本发明总体上涉及计算机视觉和视觉跟踪领域。更具体地，本发明涉及用于生成和管理可搜索的真实场景数据库的方法、电路、设备、组件、系统和功能相关联的计算机可执行代码，所述数据库可以包括与出现在真实场景中的实体相关联的实体和物理事件的记录，其中所述真实场景数据库至少部分地基于由被配置为对来自真实场景的相机数据流(camera feeds)执行实体和物理事件检测的计算机视觉系统所生成的数据。

本申请基于申请号为US15/264,627、申请日为2016年09月14日的美国专利申请提出，并要求该美国专利申请的优先权，该美国专利申请的全部内容在此引入本申请作为参考。

背景技术

已经开发了各种系统来帮助人们识别、监视、跟踪和/或定位在诸如家庭和办公室之类的空间中的物体。很常见的例子是通过发出可听见的信号来响应拍手的钥匙扣以及具有听筒单元的便携式电话，当从基站单元寻呼便携式电话时，听筒单元振铃。现有技术还提供了一些更精细的计算机实现的技术用于跟踪和管理物品，但需要手动注册要跟踪的物品。

因此，仍然需要可以促进生成和操作可搜索的真实场景数据库的解决方案，可搜索的真实场景数据库包括与出现在真实场景中的实体和物理事件相关的可搜索记录，其中数据库记录可以从出现在覆盖真实场景的摄像机中的光学跟踪实体(例如人、动物和物体)中导出。

发明内容

本发明涉及用于生成可搜索的真实场景数据库(也被称为场景播放或场景转录)的方法、电路、设备、组件、系统和功能相关联的计算机可执行代码。根据本发明的实施例，可搜索的真实场景数据库可以包括过去和现在出现在真实场景中的实体以及也是过去和现在发生在真实场景中的物理事件的描述符，其中术语实体或多个实体可以指场景中出现的人或多个人、动物或多个动物、和/或其他类型的物体。术语物理事件可以包括实体或多个实体所采取或发生的行为(例如，儿童走过房间、男子对孩子说“你好，蒂米”、老人摔在地板上等)。术语物理事件还可以包括在真实场景中可见的元素或特征中的场景变化(例如，房间中的照明暗淡、物体掉落等)。根据本申请的实施例，真实场景(有时也称为“场景”)可以由单个摄像机所覆盖的物理区域或位置来定义，或者可以由一组摄像机所覆盖的多个物理区域或位置构成。

根据本发明的实施例，可搜索的真实场景数据库可以接收并且可以包括多种类型或域的数据(也称为多域数据)，例如：(a)来自覆盖真实场景的相机的一个或多个相机数据流中的视频流片段；(b)来自覆盖真实场景的相机的记录的音频片段；(c)描述出现在真实场景中的实体和物理事件的数据记录；以及(d)描述出现在真实场景中的实体之间的关系的数据记录。根据本发明的进一步的实施例，可搜索的真实场景数据库可以由被配置为自动检测和/或自动注册来自真实场景的相机数据流中可见的特定实体、特定物理事件和/或特定关系(例如，元标记音频/视频记录和/或生成描述符记录)的图像处理电路所产生，其中自动检测和/或自动注册可以包括场景获取和/或场景导出的多域数据记录的互相关。

根据一些实施例，生成可搜索的真实场景数据库可以包括以下步骤：(1)从监视真实场景的相机接收一个或多个摄像机数据流；(2)对来自真实场景的一个或多个相机数据流进行处理，以便：(a)检测和表征出现在场景相机数据流中的场景元素；(b)检测、提取和表征在场景相机数据流中可见的实体的属性；(c)识别场景相机数据流中可见的特定实体；以及(d)检测、提取和表征在场景相机数据流中可见的实体所采取的或被施加的动作；以及(3)组织和存储：(a)相机数据流的分段；(b)场景表征信息；(c)与出现在相机数据流中的实体的属性相关的表征信息；(d)出现在相机数据流中的实体的创造者；以及(e)与出现在场景中的真实场景物理事件相关的表征信息(例如，出现在相机数据流中的实体所采取的动作或针对该实体发生的事件)。