[发明专利]一种直播流的审查干预方法、装置、存储介质及设备在审
申请号: | 202111679112.0 | 申请日: | 2021-12-31 |
公开(公告)号: | CN114339292A | 公开(公告)日: | 2022-04-12 |
发明(设计)人: | 王玮;杨灿;王兆育;丁艳燕;国丽 | 申请(专利权)人: | 安徽听见科技有限公司 |
主分类号: | H04N21/2187 | 分类号: | H04N21/2187;H04N21/43;H04N21/433;H04N21/439;H04N21/44;H04N21/488;H04N21/6437;H04N21/8547;G10L15/08;G10L15/26 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 钱湾湾 |
地址: | 230088 安徽省合肥市高高新区习*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 直播 审查 干预 方法 装置 存储 介质 设备 | ||
1.一种直播流的审查干预方法,其特征在于,包括:
获取待审查的目标直播数据流,并对所述目标直播数据流进行预处理,分离出所述目标直播数据流中的音频流和视频流进行缓存;
对所述音频流进行语音识别,得到敏感词以及所述敏感词对应的标记信息;
根据所述敏感词对应的标记信息,确定所述敏感词在所述音频流中出现的目标位置,并利用预设消音方式对所述目标位置上的音频流进行干预,得到审查干预后的音频流;
根据所述审查干预后的音频流中音频帧的时间戳信息,从缓存的所述视频流中检索对应的视频帧,并将所述审查干预后的音频帧和视频帧进行同步,以及将同步后的视频流进行播放。
2.根据权利要求1所述的方法,其特征在于,所述获取待审查的目标直播数据流,包括:
通过预设音视频采集设备获取待审查的目标直播数据流;和/或,根据网络实时消息传输协议RTMP拉流地址获取待审查的目标直播数据流;和/或,从本地视频文件获取待审查的目标直播数据流。
3.根据权利要求1所述的方法,其特征在于,所述对所述音频流进行语音识别,得到敏感词以及所述敏感词对应的标记信息,包括:
对所述音频流进行语音识别,并将识别结果转换为标准字幕格式的字幕文本;
根据预设敏感词库,对所述字幕文本进行敏感词检测,确定所述敏感词并进行标记,得到所述字幕文本中包含的敏感词以及所述敏感词对应的标记信息。
4.根据权利要求1所述的方法,其特征在于,所述根据所述敏感词对应的标记信息,确定所述敏感词在所述音频流中出现的目标位置,包括:
根据所述敏感词对应的标记信息,确定所述敏感词在所述音频流中出现的开始时间和结束时间;
根据所述开始时间和结束时间,标记出所述敏感词在所述音频流中出现的目标位置。
5.根据权利要求1所述的方法,其特征在于,所述预设消音方式为静音或哔音;所述利用预设消音方式对所述目标位置上的音频流进行干预,得到审查干预后的音频流,包括:
利用静音或哔音覆盖所述目标位置上的敏感词发声的效果,得到审查干预后的音频流。
6.根据权利要求1所述的方法,其特征在于,所述根据所述审查干预后的音频流中音频帧的时间戳信息,从缓存的所述视频流中检索对应的视频帧,并将所述审查干预后的音频帧和视频帧进行同步,以及将同步后的视频流进行播放,包括:
根据所述审查干预后的音频流中当前时刻音频帧的时间戳信息,从缓存的所述视频流中检索出开始播放时间不大于所述当前时刻音频帧的开始播放时间的视频帧,并将所述当前时刻音频帧和检索出的视频帧编码成预设格式的视频流,作为当前时刻同步后的视频流进行播放。
7.根据权利要求3所述的方法,其特征在于,所述根据所述审查干预后的音频流中音频帧的时间戳信息,从缓存的所述视频流中检索对应的视频帧,并将所述审查干预后的音频帧和视频帧进行同步,以及将同步后的视频流进行播放,包括:
根据所述审查干预后的音频流中当前时刻音频帧的时间戳信息,从缓存的所述视频流中检索出开始播放时间不大于所述音频帧的开始播放时间的视频帧,以及从脱敏处理后的字幕文本中检索出开始播放时间不大于所述音频帧的开始播放时间的字幕帧;
将所述当前时刻音频帧和检索出的视频帧以及字幕帧编码成预设格式的视频流,作为当前时刻同步后的视频流进行播放。
8.根据权利要求1-7任一项所述的方法,其特征在于,所述方法还包括:
记录对所述目标直播数据流进行审查干预所消耗的处理时间;
判断所述处理时间是否小于预设审查干预时间,若是,则调小所述预设审查干预时间;如否,则调大所述预设审查干预时间。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于安徽听见科技有限公司,未经安徽听见科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111679112.0/1.html,转载请声明来源钻瓜专利网。