[发明专利]基于视频内容的处理方法、装置、设备和存储介质

权利要求书

1.一种基于视频内容的处理方法，包括：

确定目标视频中与目标对象相关联的多个视频帧；

基于所述目标对象在所述多个视频帧中的多个视觉特征，确定所述目标对象的目标特征表示；以及

基于所述目标特征表示，确定与所述目标对象相关联的至少一项搜索结果。

2.根据权利要求1所述的方法，其中确定目标视频中与目标对象相关联的多个视频帧包括：

利用对象检测模型，从所述目标视频中确定与所述目标对象相关联的视频帧序列，所述视频帧序列包括连续的所述多个视频帧。

3.根据权利要求1所述的方法，其中基于所述目标对象在所述多个视频帧中的多个视觉特征确定所述目标对象的目标特征表示包括：

基于所述目标对象在所述多个视频帧中的视觉特征，确定多个单帧特征表示；以及

基于所述多个单帧特征表示的聚合，确定所述目标对象的所述目标特征表示。

4.根据权利要求1所述的方法，其中基于所述目标特征表示包括确定与所述目标对象相关联的至少一项搜索结果包括：

基于所述目标特征表示，从目标搜索库中确定与所述目标对象相关联的所述至少一项搜索结果，所述目标搜索库至少指示一组候选搜索结果同与特征表示之间的对应性。

5.根据权利要求4所述的方法，还包括：

确定所述目标对象的类别；以及

从多个搜索库中，确定与所述类别对应的所述目标搜索库。

6.根据权利要求4所述的方法，还包括利用以下过程来构建所述目标搜索库：

获取与所述一组候选搜索结果相关联的视觉内容；

确定由所述视觉内容所指示的一组候选对象；

确定所述一组候选对象的一组视觉特征表示；以及

构建所述目标搜索库，以指示所述一组候选搜索结果与所述一组视觉特征表示之间的所述对应性。

7.根据权利要求1所述的方法，还包括：

利用意图处理模型，从多个视频中确定与内容推荐相关联的所述目标视频。

8.根据权利要求7所述的方法，其中所述意图处理模型被配置为：

基于对应视频的一组视频帧和视频描述信息，确定所述对应视频是否与内容推荐相关联。

9.根据权利要求1所述的方法，还包括：

排序所述至少一项搜索结果；以及

提供经排序的所述至少一项搜索结果。

10.根据权利要求9所述的方法，其中排序所述至少一项搜索结果包括：

至少基于所述至少一项搜索结果的第一描述信息和/或所述目标视频的第二描述信息，排序所述至少一项搜索结果。

11.根据权利要求1所述的方法，其中所述至少一项搜索结果包括至少一项视觉内容搜索结果，所述方法还包括：

提供所述至少一项视觉内容搜索结果，其中视觉内容搜索结果包括图片搜索结果和/或视频搜索结果。

12.根据权利要求1所述的方法，其中所述至少一项搜索结果包括至少一项商品搜索结果，所述方法还包括：

提供所述至少一项商品搜索结果；以及

关联于所述至少一项商品搜索结果，提供与所述至少一项商品搜索结果相关联的商品视觉内容，所述商品视觉内容是基于所述目标特征表示而被确定。

13.根据权利要求1所述的方法，还包括获取以下至少一项以作为所述目标视频：

上传的视频文件、

发布的视频作品、

直播的视频内容。