[发明专利]用于检测视频事件的方法、装置、服务器和介质在审
申请号: | 202011079438.5 | 申请日: | 2020-10-10 |
公开(公告)号: | CN112287771A | 公开(公告)日: | 2021-01-29 |
发明(设计)人: | 左佳伟;陈越;王林芳;潘滢炜;姚霆;梅涛 | 申请(专利权)人: | 北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/02 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100176 北京市大兴区经济技*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 检测 视频 事件 方法 装置 服务器 介质 | ||
本公开的实施例公开了用于检测视频事件的方法、装置、服务器和介质。该方法的一具体实施方式包括:获取相关视频组,其中,该相关视频组包括拍摄对象一致、拍摄视角不同且时间对齐的至少两个视频;将该相关视频组输入至预先训练的视频事件分类模型,得到该相关视频组中的视频所记录的事件的类别,其中,该视频事件分类模型中包括关系网络,该关系网络用于融合从该相关视频组中的视频中分别提取的特征。该实施方式提升了对视频所记录的特定类型事件进行识别的准确度。
技术领域
本公开的实施例涉及计算机技术领域,具体涉及用于检测视频事件的方法、装置、服务器和介质。
背景技术
随着人工智能(Artificial Intelligence,AI)技术的发展,视频中特定类型事件的识别和利用多个视频素材的融合生成新的视频的技术也取得了越来越广泛的应用。
现有技术中,利用机器学习方法进行视频事件检测的模型往往仅仅支持单路视频的输入,无法解决诸如直播过程中导播技术和精彩片段回放所需要处理的多路视频的事件识别。而且,由于直播导播需要涉及大量的事件识别、机位切换、精彩片段回放等,现有技术通常只是设置各种画面切换规则,受制于视频事件识别的准确性和规则设定的有限性,在诸如体育赛事直播等现场变化丰富的动态场景下的导播效果难以达到要求,仍然需要依赖人工操作。
发明内容
本公开的实施例提出了用于检测视频事件的方法、装置、终服务器和介质。
第一方面,本公开的实施例提供了一种用于检测视频事件的方法,该方法包括:获取相关视频组,其中,相关视频组包括拍摄对象一致、拍摄视角不同且时间对齐的至少两个视频;将相关视频组输入至预先训练的视频事件分类模型,得到相关视频组中的视频所记录的事件的类别,其中,视频事件分类模型中包括关系网络,关系网络用于融合从相关视频组中的视频中分别提取的特征。
第二方面,本公开的实施例提供了一种用于合成目标视频的方法,该方法包括:获取从至少两个机位拍摄的预设时长的视频和事件信息集合,其中,事件信息集合中的事件信息包括至少两个机位拍摄的预设时长的视频所记录的事件的标识、事件起始时刻和事件结束时刻;从事件信息集合中选取事件信息作为目标事件信息;确定目标事件信息所指示的事件的类别;根据所确定的事件的类别,从至少两个机位拍摄的预设时长的视频中选取与目标事件信息匹配的视频片段;根据所选取的视频片段所指示的时间顺序,合成目标视频。
第三方面,本公开的实施例提供了一种用于检测视频事件的装置,该装置包括:第一获取单元,被配置成获取相关视频组,其中,相关视频组包括拍摄对象一致、拍摄视角不同且时间对齐的至少两个视频;生成单元,被配置成将相关视频组输入至预先训练的视频事件分类模型,得到相关视频组中的视频所记录的事件的类别,其中,视频事件分类模型中包括关系网络,关系网络用于融合从相关视频组中的视频中分别提取的特征。
第四方面,本公开的实施例提供了一种用于合成目标视频的装置,该装置包括:第二获取单元,被配置成获取从至少两个机位拍摄的预设时长的视频和事件信息集合,其中,事件信息集合中的事件信息包括至少两个机位拍摄的预设时长的视频所记录的事件的标识、事件起始时刻和事件结束时刻;第一选取单元,被配置成从事件信息集合中选取事件信息作为目标事件信息;确定单元,被配置成确定目标事件信息所指示的事件的类别;第二选取单元,被配置成根据所确定的事件的类别,从至少两个机位拍摄的预设时长的视频中选取与目标事件信息匹配的视频片段;合成单元,被配置成根据所选取的视频片段所指示的时间顺序,合成目标视频。
第五方面,本公开的实施例提供了一种服务器,该服务器包括:一个或多个处理器;存储装置,其上存储有一个或多个程序;当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实现方式描述的方法。
第六方面,本公开的实施例提供了一种计算机可读介质,其上存储有计算机程序,该程序被处理器执行时实现如第一方面中任一实现方式描述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司,未经北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011079438.5/2.html,转载请声明来源钻瓜专利网。