[发明专利]字幕识别方法、装置、电子设备及可读存储介质有效
申请号: | 202310053894.X | 申请日: | 2023-02-03 |
公开(公告)号: | CN115797921B | 公开(公告)日: | 2023-05-09 |
发明(设计)人: | 刘艳鑫 | 申请(专利权)人: | 北京探境科技有限公司 |
主分类号: | G06V20/62 | 分类号: | G06V20/62;G06V30/146;G06V30/414 |
代理公司: | 深圳市嘉勤知识产权代理有限公司 44651 | 代理人: | 刘婧 |
地址: | 100094 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 字幕 识别 方法 装置 电子设备 可读 存储 介质 | ||
1.一种字幕识别方法,其特征在于,包括:
获取视频数据;
检测所述视频数据对应的字幕文件;
当未检测到所述视频数据对应的字幕文件时,检测所述视频数据是否具备内置字幕信息;
当检测到所述视频数据具备内置字幕信息时,遍历所述视频数据的所有文本框;
获取所述视频数据的分辨率;
基于所述分辨率,构建初始矩阵,所述初始矩阵为一个维度与视频分辨率大小相同的全零矩阵;
基于预设的运动检测算法,计算所述文本框的运动矢量;
将当前处理的文本框确定为当前处理对象;
计算所述当前处理对象与所述文本框之间的交并比;
基于所述交并比以及所述当前处理对象与所述文本框之间内容差异对所述文本框进行更新;
根据所述初始矩阵以及运动矢量,对更新后文本框进行滤除处理;
将处理后文本框的字幕确定为所述视频数据的字幕。
2.根据权利要求1所述的方法,其特征在于,所述当未检测到所述视频数据对应的字幕文件时,检测所述视频数据是否具备内置字幕信息,包括:
确定所述视频数据中包含文字的帧数;
检测所述帧数是否大于预设值;
当检测到所述帧数大于预设值时,则遍历所述视频数据中的文本框;
基于所述文本框,检测所述视频数据是否具有内置字幕信息。
3.根据权利要求1或2所述的方法,其特征在于,所述获取视频数据,包括:
获取视频链接;
根据所述视频链接下载所述视频数据,并将所述视频数据转换为预设格式的视频数据。
4.根据权利要求1或2所述的方法,其特征在于,所述基于所述文本框以及预设的运动检测算法,识别所述视频数据的字幕之后,还包括:
根据所述内置字幕信息对所述视频数据进行语音对齐。
5.一种字幕识别装置,其特征在于,包括:
获取模块,用于获取视频数据;
第一检测模块,用于检测所述视频数据对应的字幕文件;
第二检测模块,用于当未检测到所述视频数据对应的字幕文件时,检测所述视频数据是否具备内置字幕信息;
遍历模块,用于当检测到所述视频数据具备内置字幕信息时,遍历所述视频数据的所有文本框;
识别模块,用于获取所述视频数据的分辨率;基于所述分辨率,构建初始矩阵;基于预设的运动检测算法,计算所述文本框的运动矢量;将当前处理的文本框确定为当前处理对象;计算所述当前处理对象与所述文本框之间的交并比;基于所述交并比以及所述当前处理对象与所述文本框之间内容差异对所述文本框进行更新;根据所述初始矩阵以及运动矢量,对更新后文本框进行滤除处理;将处理后文本框的字幕确定为所述视频数据的字幕,其中,所述初始矩阵为一个维度与视频分辨率大小相同的全零矩阵。
6.一种电子设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至4中任一项所述字幕识别方法的步骤。
7.一种可读存储介质,其特征在于,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至4中任一项所述字幕识别方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京探境科技有限公司,未经北京探境科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310053894.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:音频处理方法、装置、存储介质及电子设备
- 下一篇:一种发泡材料及其制备方法