[发明专利]话题标签推荐方法、装置、设备及存储介质

说明书

本公开关于一种话题标签推荐方法、装置、设备及存储介质，属于多媒体技术领域。本公开的实施例提供了一种基于视频在多个模态的特征来推荐话题标签的方法，通过视频中的图像以及视频生产者的用户特征，由机器自动化地生成话题标签，将话题标签推荐给用户。由于推荐的话题标签既与视频的内容匹配，又体现了视频生产者自身的信息，因此充分保证了话题标签与视频之间的匹配度，从而提高了话题标签的精确性，使得推荐的话题标签更加贴近用户意图。

技术领域

本公开涉及多媒体技术领域，尤其涉及一种话题标签推荐方法、装置、设备及存储介质。

背景技术

视频的话题标签(Hashtag)是用户在视频生产环节，在描述视频内容时打上的带“#”的文字信息。话题标签对于视频的内容识别、聚合、分发、推荐都发挥着重要的作用。

相关技术添加话题标签的过程包括：当用户拍摄视频后，点击发布页面中的话题选项。视频客户端会显示搜索框。用户想好与视频匹配的话题标签后，在搜索框中执行输入操作，输入想要添加的话题标签，再对输入的话题标签执行确认操作，从而在发布视频时添加输入的话题标签。

采用上述方式时，需要用户人工确定与视频匹配的话题标签，然而人工确定话题标签存在主观性，难以保证确定出的话题标签与视频之间的匹配性，导致话题标签的精确性差，进而影响了根据视频标签对视频进行内容识别、分发、推荐等过程的准确性。

发明内容

本公开提供一种话题标签推荐方法、装置、设备及存储介质，能够提高话题标签的精确性。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种话题标签推荐方法，包括:获取视频；

从所述视频中提取至少一帧图像；

根据上传所述视频的用户账号，获取所述用户账号对应的用户特征；

根据所述至少一帧图像以及所述用户特征，生成与所述视频匹配的话题标签；

向所述用户账号推荐所述话题标签。

可选地，所述根据所述至少一帧图像以及所述用户特征，生成与所述视频匹配的话题标签，包括：

对所述至少一帧图像分别进行特征提取，得到每帧图像的图像特征；

对所述至少一帧图像的图像特征与所述用户特征进行融合，得到融合特征；

根据所述融合特征，确定多个候选标签的概率；

根据每个候选标签的概率，在所述多个候选标签中确定所述话题标签。

可选地，所述对所述至少一帧图像的图像特征与所述用户特征进行融合，得到融合特征，包括：

通过多头注意力网络，对所述至少一帧图像的图像特征与所述用户特征分别进行自注意力运算，得到所述融合特征。

可选地，所述对所述至少一帧图像分别进行特征提取，得到每帧图像的图像特征，包括：

通过至少一个分类网络，并行对所述至少一帧图像卷积处理，输出每帧图像的图像特征。

可选地，所述根据上传所述视频的用户账号，获取所述用户账号对应的用户特征，包括：

获取所述用户账号对应的用户属性；

对所述用户属性进行线性映射以及非线性映射，得到所述用户特征。

可选地，所述根据上传所述视频的用户账号，获取所述用户账号对应的用户特征，包括：

获取所述用户账号对应的历史行为数据；

对所述历史行为数据进行线性映射以及非线性映射，得到所述用户特征。