[发明专利]用于编录、检索和组织与对象相关联的用户生成的内容的计算系统和方法

说明书

本公开提供了用于对与对象相关联的用户生成的内容进行编录、检索和/或组织的计算系统和方法。本公开的各方面针对利用计算机使用户能够与和编录的对象相关联的用户生成的内容的库进行交互的系统和方法。例如，用户可以捕获现实世界对象的一个或多个图像，用各种类型的用户生成的内容标记或以其它方式注释对象，并将对象及其相关联的内容组织到一个或多个库中。然后，可以在接收到相同对象或显示相似特征的对象的图像后，将用户生成的内容提供给其他用户。

优先权要求

本申请基于申请日为2018年11月7日的美国临时申请号62/756,857并要求其优先权。申请人要求该申请中的每一个的优先权和权益，并且通过引用将该申请的全部整体并入本文。

技术领域

本公开一般而言涉及图像识别和数据存储。更具体而言，本公开涉及提供用于检索和编录(catalog)包括图像的用户生成的数据的工具的计算系统和方法。

背景技术

由于机器学习的进步，包括图像分类和数据管理在内的计算技术已经被大大的改善。但是，图像识别中的绊脚石是获得稀有或罕见对象的训练数据。可以不断改变的现实世界环境的复杂性加剧了这个问题。当前的图像识别工具常常依赖于静态的学习模型，而不是可以用新数据连续更新的模型。这为增强现实应用和需要处理与动态改变的世界相关联的当前图像数据的其它工具的开发提出了挑战。虽然静态模型可以提供一般的用户体验，但仍有待一种用于定制与动态图像数据的用户交互的解决方案。

发明内容

本公开的实施例的方面和优点将在下面的描述中部分地阐述，或者可以从描述中获知，或者可以通过实施例的实践而获知。

本公开的一个示例方面针对一种用于对与对象相关联的用户生成的数据进行编录和检索的计算系统。该计算系统包括一个或多个处理器和共同存储指令的一个或多个非暂态计算机可读介质，这些指令在由一个或多个处理器执行时使计算系统执行操作。所述操作包括接收数据集，所述数据集包括由用户捕获的描绘对象的一个或多个图像。所述操作包括使用人工神经网络处理数据集以生成与对象相关联的嵌入。所述操作包括访问用户生成的内容的多个库中的一个或多个库，其中多个库中的每个库包括分别与一个或多个编录的对象相关联的一个或多个编录的嵌入。每个编录的嵌入已经从由一个或多个其他用户捕获的相关联的编录的对象的一个或多个图像生成。用户生成的内容的一个或多个项目与每个编录的对象相关联。一个或多个库是多个库的子集。所述操作包括至少部分地基于嵌入与一个或多个库中包括的一个或多个编录的嵌入的比较来标识(identify)一个或多个库中包括的一个或多个编录的嵌入中的最接近的编录的嵌入。所述操作包括提供与一个或多个库中包括的一个或多个编录的嵌入中的最接近的编录的嵌入相关联的用户生成的内容的至少一个项目，用于向用户呈现。

本公开的另一个示例方面针对一种用于对与对象相关联的用户生成的数据进行编录和检索的计算机实现的方法。所述方法包括由一个或多个计算设备接收数据集，该数据集包括由用户捕获的描绘对象的一个或多个图像。所述方法包括由一个或多个计算设备使用神经网络处理数据集以生成与对象相关联的嵌入。所述方法包括由一个或多个计算设备访问多个库中的一个或多个库。多个库中的每个库包括分别与一个或多个编录的对象相关联的一个或多个编录的嵌入。每个编录的嵌入已经从相关联的编录的对象的一个或多个图像生成。内容的一个或多个项目与每个嵌入相关联。一个或多个库是多个库的子集。所述方法包括由一个或多个计算设备将嵌入与编录的对象之一相关联。将嵌入与编录的对象之一相关联产生新的编录的嵌入，该新的编录的嵌入可由一个或多个计算设备访问。