[发明专利]自动从视频中检测表达情感的内容以及丰富图像索引

说明书

本公开提供了一种用于从视频中检测表达情感的内容的方法、装置、和系统。所述方法包括：将所述视频划分成多个片段；从所述多个片段中的第一片段和至少一个第二片段提取与所述第一片段相关联的特征；基于与所述第一片段相关联的特征来确定所述第一片段是否表达情感；以及如果所述第一片段表达情感，则基于与所述第一片段相关联的特征来建立包含所述第一片段的索引。

背景技术

最近，越来越多的人搜索诸如GIF图像以及表情包(meme)之类的有表现力的或有趣的图像以在短消息服务(SMS)、电子邮件、社交网络服务(SNS)等中表达自己。这些有表现力的图像传统上是由人创作的。这种手动生成的方法导致了数量非常受限的好的候选。此外，为了找到这些由人创作的图像，传统的搜索引擎需要爬取所有网页。这样的图像是否能够被搜索引擎找到依赖于其在网络上的传播规模。

发明内容

提供了该发明内容以用简化形式引入在以下的具体实施方式中进一步描述的概念的选择。该发明内容不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护的主题的范围。

在一个方面中，本公开提供了一种用于从视频中检测表达情感的内容的方法。所述方法可以包括：将视频划分成多个片段；从所述多个片段中的第一片段和至少一个第二片段提取与所述第一片段相关联的特征；基于与所述第一片段相关联的特征来确定所述第一片段是否表达情感；以及如果所述第一片段表达情感，则基于与所述第一片段相关联的特征来建立包含所述第一片段的索引。

在另一个方面中，本公开提供了一种用于从视频中检测表达情感的内容的装置。所述装置可以包括：划分模块，其被配置为将所述视频划分成多个片段；提取模块，其被配置为从所述多个片段中的第一片段和至少一个第二片段提取与所述第一片段相关联的特征；确定模块，其被配置为基于与所述第一片段相关联的特征来确定所述第一片段是否表达情感；以及建立模块，其被配置为如果所述第一片段表达情感，则基于与所述第一片段相关联的特征来建立包含所述第一片段的索引。

在另一个方面中，本公开提供了一种用于丰富图像索引的方法。所述方法可以包括：将视频划分成多个片段；从所述多个片段中的第一片段提取特征；基于从所述第一片段提取的特征来确定是否存在来自网页的类似于所述第一片段的至少一个图像；以及如果存在所述至少一个图像，则基于从所述第一片段提取的特征以及从所述多个片段中的至少一个第二片段提取的特征来丰富包含所述至少一个图像的图像索引。

在另一个方面中，本公开提供了一种用于丰富图像索引的装置。所述装置可以包括：划分模块，其被配置为将视频划分成多个片段；提取模块，其被配置为从所述多个片段中的第一片段提取特征；确定模块，其被配置为基于从所述第一片段提取的特征来确定是否存在来自网页的类似于所述第一片段的至少一个图像；以及丰富模块，其被配置为如果存在所述至少一个图像，则基于从所述第一片段提取的特征以及从所述多个片段中的至少一个第二片段提取的特征来丰富包含所述至少一个图像的图像索引。

在另一个方面中，本公开提供了一种用于从视频中检测表达情感的内容的系统。所述系统可以包括一个或多个处理器和存储器。所述存储器可以存储计算机可执行指令，所述计算机可执行指令当被执行时，使得所述一个或多个处理器执行根据本公开的各种方面的用于从视频中检测表达情感的内容的方法的任何步骤。

在另一个方面中，本公开提供了一种用于丰富图像索引的系统。所述系统可以包括一个或多个处理器和存储器。所述存储器可以存储计算机可执行指令，所述计算机可执行指令当被执行时，使得所述一个或多个处理器执行根据本公开各种方面的用于丰富图像索引的方法的任何步骤。

应当注意的是，以上的一个或多个方面包括在下文中充分描述的并且在权利要求中特别指出的特征。以下的描述和附图详细地阐述了一个或多个方面的某些说明性特征。这些特征仅仅指示可以采用各种方面的原理的各种方式中的几种方式，并且该公开旨在包括所有这样的方面及其等同物。

附图说明

在下文中将结合附图来描述所公开的方面，提供这些附图以进行说明而不限制所公开的方面。