[发明专利]服务器、显示设备、诗词歌赋生成方法及媒资播放方法

说明书

本申请实施例提供了一种服务器、显示设备、诗词歌赋生成方法及媒资播放方法，其中，服务器被配置为：接收来自显示设备的诗词歌赋生成请求，所述诗词歌赋生成请求中包含目标图片；生成所述目标图片的描述文本；在预先建立的诗词歌赋数据库中召回所述描述文本对应的诗词歌赋；向所述显示设备发送包括所述诗词歌赋的生成结果。本申请解决了弹幕不贴合媒资的技术问题，提升了用户体验。

技术领域

本申请涉及图像处理技术领域，尤其涉及一种服务器、显示设备、诗词歌赋生成方法及媒资播放方法。

背景技术

人们在显示设备上观看媒资时，经常有评价媒资的需求。弹幕功能的出现使得人们在单独观看媒资时有了分享观点的渠道。弹幕功能是指用户可在媒资播放的某一时刻输入自己的观点，其他用户在观看到该时刻时，显示设备可显示该观点，从而实现了不同用户分享观点的效果。相关技术中，弹幕功能展示的弹幕均为观看媒资的用户输入的观点，然而，不同用户输入的观点可能多种多样，杂乱无章，一些用户观点甚至可能还跟当前播放界面不相关，这些质量不佳的弹幕都会影响用户观看媒资的体验。

发明内容

为解决弹幕功能体验不佳的技术问题，本申请提供了一种服务器、显示设备、诗词歌赋生成方法及媒资播放方法。

第一方面，本申请提供了一种服务器，该服务器被配置为：

接收来自显示设备的诗词歌赋生成请求，所述诗词歌赋生成请求中包含目标图片；

生成所述目标图片的描述文本；

在预先建立的诗词歌赋数据库中召回所述描述文本对应的诗词歌赋；

向所述显示设备发送包括所述诗词歌赋的生成结果。

在一些实施例中，生成所述目标图片的描述文本，包括：

通过预训练的特征提取网络提取所述目标图片的图片特征；

通过预训练的描述生成网络对所述图片特征进行分析，得到所述目标图片的描述文本。

在一些实施例中，所述特征提取网络包括：依次连接的快速区域卷积神经网络、区域生成网络、感兴趣区域池化层和全连接层，其中，所述快速区域卷积神经网络还与所述感兴趣区域池化层连接。

在一些实施例中，通过预训练的特征提取网络提取所述目标图片的图片特征，包括：

通过快速区域卷积神经网络提取所述目标图片的原始特征得到原始特征图；

通过区域生成网络生成所述原始特征图对应的建议窗口；

把所述建议窗口映射到所述原始特征图上，通过所述感兴趣区域池化层生成每个建议窗口的固定尺寸的特征图；

通过全连接层处理每一个建议窗口的特征图，得到所述目标图片的图片特征。

在一些实施例中，所述描述生成网络包括：依次连接的第一个短时记忆网络、第二个长短时记忆网络、第一个全连接层、第三个长短时记忆网络、第二全连接层和逻辑回归模型。

在一些实施例中，在预先建立的诗词歌赋数据库中召回所述描述文本对应的诗词歌赋，包括：

将所述描述文本进行分词，得到多个词语；

分别召回每个词语对应的诗词歌赋；

将召回的多首诗词歌赋取交集，得到候选诗词歌赋；

计算所述描述文本与候选诗词歌赋的相似度，选出相似度最高的候选诗词歌赋作为所述描述文本对应的诗词歌赋。

在一些实施例中，在接收来自显示设备的诗词歌赋生成请求之前，所述服务器还被配置为：

采集诗词歌赋的正文及相关赏析；