[发明专利]基于区块链的多媒体处理方法及相关设备

权利要求书

1.一种基于区块链的多媒体处理方法，其特征在于，包括：

对目标多媒体进行特征提取，得到所述目标多媒体的特征数据，并在特征提取之后，将所述目标多媒体的特征数据上传到区块链中；

从所述区块链中获取已发布多媒体的特征数据，所述特征数据包括所对应多媒体在至少两个特征维度上的特征信息，所述特征信息包括视频语义信息以及旋律特征信息，所述视频语义信息包括相关联的视频帧的物体标签、物体标签所指示物体在视频帧中的位置信息和该视频帧在视频帧序列中的位置信息；

根据所述目标多媒体的特征数据和所述已发布多媒体的特征数据，计算所述目标多媒体与所述已发布多媒体的相似度；

根据所述目标多媒体与所述已发布多媒体的相似度，确定所述目标多媒体的查重结果；

所述对目标多媒体进行特征提取，得到所述目标多媒体的特征数据，包括：

获取所述目标多媒体的视频帧序列；

通过神经网络对所述视频帧序列中的每一视频帧进行图像识别，得到所述每一视频帧对应的物体标签；

将所述每一视频帧对应的物体标签和所述视频帧在所述视频帧序列中的位置信息相关联，得到所述目标多媒体的视频语义信息；以及

获取所述目标多媒体中的音频数据；

对所述音频数据进行旋律识别，得到所述目标多媒体对应的旋律音轨信息；

其中，所述视频语义信息为视频语义特征向量，所述旋律音轨信息为旋律音轨特征向量，所述根据所述目标多媒体与所述已发布多媒体的相似度，确定所述目标多媒体的查重结果包括：

根据视频语义特征向量和旋律音轨特征向量来计算目标多媒体与已发布多媒体的相似度，确定所述目标多媒体的查重结果；

所述根据所述目标多媒体与所述已发布多媒体的相似度，确定所述目标多媒体的查重结果之后，所述方法还包括：

若所述目标多媒体的查重结果指示所述目标多媒体疑似抄袭，则从所述区块链中获取第一多媒体对应的用户标识，所述第一多媒体是所述目标多媒体对应的疑似被抄袭多媒体；

将所述目标多媒体发送至所述用户标识对应的目标客户端，以使所述目标客户端所在用户进行侵权确认。

2.根据权利要求1所述的方法，其特征在于，所述将所述目标多媒体发送至所述用户标识对应的目标客户端之后，所述方法还包括：

若接收到所述目标客户端返回的侵权确认信息，对所述目标多媒体进行侵权标记或者向所述目标多媒体的作者所在客户端发送侵权告警信息。

3.根据权利要求1所述的方法，其特征在于，所述根据所述目标多媒体与所述已发布多媒体的相似度，确定所述目标多媒体的查重结果，包括：

对于每一已发布多媒体，若根据在每一特征维度上所述目标多媒体与所述已发布多媒体的相似度，确定存在至少一个特征维度上的相似度超过所述特征维度对应的相似度阈值，则确定所述目标多媒体疑似抄袭所述已发布多媒体；若所述目标多媒体与所述已发布多媒体在每一特征维度上的相似度均不超过所述特征维度对应的相似度阈值，则确定所述目标多媒体与所述已发布多媒体不相似；

若在全部已发布多媒体中存在所述目标多媒体疑似抄袭的已发布多媒体，则生成指示所述目标多媒体疑似抄袭的查重结果；

若所述目标多媒体与全部已发布多媒体均不相似，则生成指示所述目标多媒体未抄袭的查重结果。

4.根据权利要求1所述的方法，其特征在于，所述特征维度至少包括图像字符维度；所述特征信息包括视频字符信息；

所述对目标多媒体进行特征提取，得到所述目标多媒体的特征数据，包括：

获取所述目标多媒体的视频帧序列；

对所述视频帧序列中的每一视频帧进行字符识别，得到每一视频帧中所包括字符的字符信息；

组合所述视频帧序列中每一视频帧对应的字符信息，得到所述目标多媒体的视频字符信息。

5.根据权利要求1所述的方法，其特征在于，所述特征维度至少包括音频语义维度；所述特征信息包括文本信息；

所述对目标多媒体进行特征提取，得到所述目标多媒体的特征数据，包括：

获取所述目标多媒体中的音频数据；

对所述音频数据进行语音识别，得到所述目标多媒体的文本信息。