[发明专利]视频切分方法、装置、设备及存储介质在审
申请号: | 202010820732.0 | 申请日: | 2020-08-14 |
公开(公告)号: | CN114120161A | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 董琦聪 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40 |
代理公司: | 北京开阳星知识产权代理有限公司 11710 | 代理人: | 袁义科 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 切分 方法 装置 设备 存储 介质 | ||
本公开实施例涉及一种视频切分方法、装置、设备及存储介质,其中,该方法包括:基于视频中的至少一部分视频帧的第一模态数据对该部分视频帧进行目标事件的第一检测处理,得到第一检测结果;基于该部分视频帧的第二模态数据对该部分视频帧进行目标事件的第二检测处理,得到第二检测结果;基于第一检测结果和第二检测结果,从该部分视频帧中确定出发生目标事件的目标帧;基于目标帧对视频进行切分,得到发生目标事件的视频片段。本公开实施例提供的方案能够提高视频切分的准确度和精度。
技术领域
本公开实施例涉及视频处理技术领域,尤其涉及一种视频切分方法、装置、设备及存储介质。
背景技术
视频切分是视频分析中的一种重要手段,尤其是对于具有人物发言的视频(比如,新闻视频、直播视频)来说,通过视频切分可以将人物发言片段从视频中切分出来,从而方便对发言内容进行分析和总结。但是现有的视频切分方法大多是以单模态数据(比如,音频、图像或字幕)作为依据进行的切分,数据较为单一,精确度较低。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本公开实施例提供了一种视频切分方法、装置、设备及存储介质。
本公开实施例的第一方面提供了一种视频切分方法,该方法包括:基于视频中的至少一部分视频帧的第一模态数据对该部分视频帧进行目标事件的第一检测处理,得到第一检测结果;基于该部分视频帧的第二模态数据对该部分视频帧进行目标事件的第二检测处理,得到第二检测结果;基于第一检测结果和第二检测结果,从该部分视频帧中确定出发生目标事件的目标帧;基于目标帧对视频进行切分,得到发生目标事件的视频片段。
本公开实施例的第二方面提供了一种视频切分方法,该方法包括:
基于直播视频中的至少一部分视频帧的第一模态数据对该部分视频帧进行发言人检测处理,得到第一检测结果;基于该部分视频帧的第二模态数据对该部分视频帧进行发言人检测处理,得到第二检测结果;基于第一检测结果和第二检测结果,从该部分视频帧中确定出有人发言的目标帧;基于目标帧对直播视频进行切分,得到直播视频中有人发言的视频片段。
本公开实施例的第三方面提供了一种视频切分方法,该方法包括:
对视频中的至少一部分视频帧的图像数据进行发言人检测处理,得到第一检测结果;对该部分视频帧的音频数据进行人声检测处理,得到第二检测结果;基于第一检测结果和第二检测结果,从该部分视频帧中确定出有人发言的目标帧;基于目标帧对视频进行切分,得到视频中有人发言的视频片段。
本公开实施例的第四方面提供了一种视频切分装置,该装置包括:
第一检测模块,用于基于视频中的至少一部分视频帧的第一模态数据对该部分视频帧进行目标事件的第一检测处理,得到第一检测结果。
第二检测模块,用于基于视频中该部分视频帧的第二模态数据对该部分视频帧进行目标事件的第二检测处理,得到第二检测结果。
确定模块,用于基于第一检测结果和第二检测结果,从该部分视频帧中确定出发生所述目标事件的目标帧。
第一切分模块,用于基于目标帧对视频进行切分,得到发生目标事件的视频片段。
本公开实施例的第五方面提供了一种视频切分装置,该装置包括:
第一检测模块,用于基于直播视频中的至少一部分视频帧的第一模态数据对该部分视频帧进行发言人检测处理,得到第一检测结果。
第二检测模块,用于基于该部分视频帧的第二模态数据对该部分视频帧进行发言人检测处理,得到第二检测结果。
确定模块,用于基于第一检测结果和第二检测结果,从该部分视频帧中确定出有人发言的目标帧。
切分模块,用于基于目标帧对直播视频进行切分,得到直播视频中有人发言的视频片段。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010820732.0/2.html,转载请声明来源钻瓜专利网。