[发明专利]一种自动违规弹幕检测方法、装置、系统、介质及设备

权利要求书

1.一种自动违规弹幕检测方法，其特征在于，包括，

获取至少一条弹幕内容以及与所述至少一条弹幕内容相关的相关视频内容；

利用文本编码器根据所述至少一条弹幕内容生成文本编码特征代表向量，并且利用视频编码器根据所述相关视频内容生成视频编码特征代表向量；

利用多模态融合器对所述文本编码特征代表向量以及所述视频编码特征代表向量进行融合生成融合编码特征向量；以及，

利用结果预测器根据所述融合编码特征向量对所述至少一条弹幕内容是否包含违规内容进行预测得到最终检测结果。

2.根据权利要求1所述的自动违规弹幕检测方法，其特征在于，所述相关视频内容包括，所述至少一条弹幕内容出现的时间点前后预定时间段内的视频内容。

3.根据权利要求1所述的自动违规弹幕检测方法，其特征在于，所述利用文本编码器根据所述至少一条弹幕内容生成文本编码特征代表向量的过程包括，

利用所述文本编码器根据所述至少一条弹幕内容的每个字生成对应的文本编码特征向量，并将所有所述文本编码特征向量经最大池化得到所述文本编码特征代表向量；

所述利用视频编码器根据所述相关视频内容生成视频编码特征代表向量的过程包括，

利用所述视频编码器根据所述相关视频内容的每一秒视频内容生成对应的视频编码特征向量，并将所有所述视频编码特征向量经最大池化得到所述视频编码特征代表向量。

4.根据权利要求1所述的自动违规弹幕检测方法，其特征在于，还包括，

对弹幕内容进行实时监测，以便在第一时间获取所述至少一条弹幕内容以及所述相关视频内容。

5.一种自动违规弹幕检测装置，其特征在于，包括，

内容获取模块，用于获取至少一条弹幕内容以及与所述至少一条弹幕内容相关的相关视频内容；

代表向量生成模块，用于利用文本编码器根据所述至少一条弹幕内容生成文本编码特征代表向量，并且利用视频编码器根据所述相关视频内容生成视频编码特征代表向量；

融合模块，用于利用多模态融合器对所述文本编码特征代表向量以及所述视频编码特征代表向量进行融合生成融合编码特征向量；以及，

检测模块，用于利用结果预测器根据所述融合编码特征向量对所述至少一条弹幕内容是否包含违规内容进行预测得到最终检测结果。

6.根据权利要求5所述的自动违规弹幕检测装置，其特征在于，还包括，

监测模块，用于对弹幕内容进行实时监测，以便在第一时间获取所述弹幕内容以及所述相关视频内容。

7.根据权利要求5所述的自动违规弹幕检测装置，其特征在于，所述代表向量生成模块包括编码特征向量生成子模块以及最大池化子模块；

所述编码特征向量生成子模块，用于利用所述文本编码器根据所述至少一条弹幕内容的每个字生成对应的文本编码特征向量，以及利用所述视频编码器根据所述相关视频内容的每一秒视频内容生成对应的视频编码特征向量；

所述最大池化子模块，用于将所有所述文本编码特征向量经最大池化得到所述文本编码特征代表向量，以及将所有所述视频编码特征向量经最大池化得到所述视频编码特征代表向量。

8.一种自动违规弹幕检测系统，包括文本编码器、视频编码器、多模块融合器、结果预测器以及如权利要求5-7任一所述的自动违规弹幕检测装置。

9.一种计算机可读存储介质，其存储有计算机指令，其特征在于，所述计算机指令被操作以执行权利要求1-4中任一项所述的自动违规弹幕检测方法。

10.一种计算机设备，其包括处理器和存储器，所述存储器存储有计算机指令，其中所述处理器操作所述计算机指令以执行权利要求1-4中任一项所述的自动违规弹幕检测。