[发明专利]音视频内容分析方法及装置

权利要求书

1.一种音视频内容分析方法，其特征在于，包括：

获取待处理音视频；

获取与所述待处理音视频相关的关联用户的属性信息；

根据所述关联用户的属性信息，对所述待处理音视频进行内容分析以输出所属类别信息。

2.根据权利要求1所述的方法，其特征在于，所述关联用户的属性信息包含：观众属性信息；

以及，所述获取与所述待处理音视频相关的关联用户的属性信息，包括：

获取驻留在观看所述待处理音视频观众周围的设备采集到的针对所述观众的第一音视频；和/或

从第三方服务平台、为所述待处理音视频提供播放平台的应用客户端和/或应用服务端，获取观看所述待处理音视频观众的用户信息；

根据所述第一音视频和/或所述观众的用户信息，确定所述观众属性信息。

3.根据权利要求2所述的方法，其特征在于，所述观众属性信息包括：观看情绪属性、观众所处场景属性和观众画像中的一项或多项，以及

根据所述第一音视频和/或所述观众的用户信息，确定所述观众属性信息，包括：

对所述第一音视频进行人脸识别以提取第一表情特征；和/或对所述第一音视频进行动作识别以提取第一动作特征；和/或对所述第一音视频进行语音识别以提取第一语音特征；根据所述第一表情特征、所述第一动作特征和/或所述第一语音特征，确定所述观看情绪属性；

和/或

对所述第一音视频进行环境识别以得到所述观众所处场景属性；

和/或

将所述观众的用户信息作为用户画像构建模型的输入，得到所述观众画像。

4.根据权利要求1所述的方法，其特征在于，所述关联用户的属性信息包含：视频提供方属性信息；

以及，所述获取与所述待处理音视频相关的关联用户的属性信息，包括：

获取驻留在视频提供方周围的设备采集到的针对所述视频提供方的第二音视频，其中，所述视频提供方为提供所述待处理音视频的用户；和/或

从第三方服务平台、为所述待处理音视频提供播放平台的应用客户端和/或应用服务端，获取所述视频提供方的用户信息；

根据所述第二音视频和/或所述视频提供方的用户信息，确定所述视频提供方属性信息。

5.根据权利要求4所述的方法，其特征在于，所述视频提供方属性信息包括：行为属性和/或视频提供方画像；以及

根据所述第二音视频和/或所述视频提供方的用户信息，确定所述视频提供方属性信息，包括：

对所述第二音视频进行人脸识别以提取第二表情特征；和/或对所述第二音视频进行动作识别以提取第二动作特征；和/或对所述第二音视频进行语音识别以提取第二语音特征；根据所述第二表情特征、所述第二动作特征和/或所述第二语音特征，确定所述行为属性；

和/或

根据所述视频提供方的用户信息作为用户画像构建模型的输入，得到所述视频提供方画像。

6.根据权利要求1至5中任一项所述的方法，其特征在于，根据所述关联用户的属性信息，对所述待处理音视频进行内容分析以输出所属类别信息，包括：

根据所述关联用户的属性信息，对所述待处理音视频进行辅助分类以得到辅助分类结果；

若辅助分类结果为高概率违规类，则增加对待处理音视频的采样频率；

根据增加后的所述采样频率，对所述待处理音视频进行采样得到采样信息；

基于所述采样信息，对所述待处理音视频进行内容分析以输出所属类别信息。

7.根据权利要求6所述的方法，其特征在于，所述关联用户的属性信息包含有观众属性信息及视频提供方属性信息；

以及，根据所述关联用户的属性信息，对所述待处理音视频进行辅助分类以得到辅助分类结果，包括：

对所述观众属性信息及所述视频提供方属性信息进行关联性分析，得到分析结果；

若所述分析结果为强关联，则基于所述观众属性信息或视频提供方属性信息，将所述待处理音视频划分为高概率违规类或低概率违规类；

若所述关联性分析结果为弱关联，则将所述待处理音视频划分为未知类。