[发明专利]一种视频循环识别方法、装置、计算机设备及存储介质有效
申请号: | 202110731049.4 | 申请日: | 2021-06-30 |
公开(公告)号: | CN113177538B | 公开(公告)日: | 2021-08-24 |
发明(设计)人: | 郭卉 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 熊永强;杜维 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 循环 识别 方法 装置 计算机 设备 存储 介质 | ||
1.一种视频循环识别方法,其特征在于,包括:
获取待识别视频的目标视频片段对,确定所述目标视频片段对的第一目标编码特征和第二目标编码特征;所述第一目标编码特征所对应的第一模态信息不同于所述第二目标编码特征所对应的第二模态信息;
获取用于对所述待识别视频进行循环识别的目标网络模型;所述目标网络模型包括与所述第一模态信息相关联的第一目标序列模型和与所述第二模态信息相关联的第二目标序列模型;所述第一目标序列模型包括第一序列表征学习层和第一相似度度量层;所述第二目标序列模型包括第二序列表征学习层和第二相似度度量层;
将所述第一目标编码特征输入至所述第一目标序列模型,通过所述第一序列表征学习层对所述第一目标编码特征进行序列特征学习,将序列特征学习到的第一目标学习特征输入至所述第一相似度度量层,由所述第一相似度度量层输出所述目标视频片段对的第一目标相似结果;
将所述第二目标编码特征输入至所述第二目标序列模型,通过所述第二序列表征学习层对所述第二目标编码特征进行序列特征学习,将序列特征学习到的第二目标学习特征输入至所述第二相似度度量层,由所述第二相似度度量层输出所述目标视频片段对的第二目标相似结果;
将所述第一目标相似结果和所述第二目标相似结果进行比对,得到所述目标视频片段对的循环比对结果;所述循环比对结果用于指示所述待识别视频的视频类型。
2.根据权利要求1所述的方法,其特征在于,所述获取待识别视频的目标视频片段对,确定所述目标视频片段对的第一目标编码特征和第二目标编码特征,包括:
在获取到待识别视频时,确定所述待识别视频的视频时长,且基于所述视频时长对所述待识别视频进行分段处理,得到N个视频片段;所述N为正整数;
从所述N个视频片段中获取视频片段Pi和视频片段Pj,将所述视频片段Pi和所述视频片段Pj作为所述待识别视频的目标视频片段对;所述i和所述j均为小于或者等于所述N的正整数,且所述i不等于所述j;
对所述目标视频片段对中的每个视频片段分别进行第一特征提取,得到所述目标视频片段对的第一目标编码特征;
对所述目标视频片段对中的每个视频片段分别进行第二特征提取,得到所述目标视频片段对的第二目标编码特征。
3.根据权利要求2所述的方法,其特征在于,所述第一模态信息为视频模态信息;
所述对所述目标视频片段对中的每个视频片段分别进行第一特征提取,得到所述目标视频片段对的第一目标编码特征,包括:
将所述目标视频片段对中的每个视频片段对应的视频帧分别作为待处理视频帧,且基于所述待处理视频帧的帧率,确定抽帧参数;
基于所述抽帧参数对所述待处理视频帧进行抽帧处理,得到与所述待处理视频帧相关联的待编码视频帧;
获取与所述视频模态信息相关联的视频编码模型,将所述待编码视频帧输入至所述视频编码模型,通过所述视频编码模型对所述待编码视频帧进行编码处理,得到所述待编码视频帧对应的视频编码特征;
基于所述待编码视频帧对应的视频编码特征,得到所述目标视频片段对的第一目标编码特征;所述第一目标编码特征包括所述视频片段Pi对应的视频编码特征Si,以及所述视频片段Pj对应的视频编码特征Sj。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110731049.4/1.html,转载请声明来源钻瓜专利网。