[发明专利]一种视频内容识别方法和相关装置在审

专利信息
申请号: 202011137819.4 申请日: 2020-10-22
公开(公告)号: CN112270238A 公开(公告)日: 2021-01-26
发明(设计)人: 禹常隆;田植良 申请(专利权)人: 腾讯科技(深圳)有限公司
主分类号: G06K9/00 分类号: G06K9/00
代理公司: 深圳市深佳知识产权代理事务所(普通合伙) 44285 代理人: 王兆林
地址: 518057 广东省深圳*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 视频 内容 识别 方法 相关 装置
【权利要求书】:

1.一种视频内容识别方法,其特征在于,所述方法包括:

对待识别视频内容进行视频分段,得到多个视频片段;

获取所述多个视频片段分别对应的风格向量;

对获取的所述风格向量进行相似度聚类,得到第一风格聚类和第二风格聚类;

确定所述第一风格聚类对应的风格向量与所述第二风格聚类对应的风格向量之间的风格相似度;

根据所述风格相似度确定所述待识别视频内容中是否包含与所述待识别视频内容不相关的内容。

2.根据权利要求1所述的方法,其特征在于,所述确定所述第一风格聚类对应的风格向量与所述第二风格聚类对应的风格向量之间的风格相似度,包括:

通过第一模型确定所述第一风格聚类对应的风格向量与所述第二风格聚类对应的风格向量之间的风格相似度;

所述第一模型通过如下方式训练得到:

确定包括第一样本和第二样本的训练样本对,所述第一样本为不包含不相关内容的第一样本视频内容,所述第二样本为包含不相关内容的第二样本视频内容;

根据所述第一样本所包括视频片段的风格向量,通过第一初始模型确定所述第一样本的两个风格聚类的风格向量之间的正样本风格相似度;

根据所述第二样本所包括视频片段的风格向量,通过所述第一初始模型确定所述第二样本的两个风格聚类的风格向量之间的负样本风格相似度;

基于增加所述正样本风格相似度和所述负样本风格相似度间的差别,对所述第一初始模型进行训练,得到所述第一模型。

3.根据权利要求2所述的方法,其特征在于,所述根据所述风格相似度确定所述待识别视频内容中是否包含与所述待识别视频内容不相关的内容,包括:

若所述风格相似度满足相似度阈值,确定所述待识别视频内容中不包含与所述待识别视频内容不相关的内容;

若所述风格相似度不满足相似度阈值,确定所述待识别视频内容中包含与所述待识别视频内容不相关的内容;

其中所述相似度阈值是通过训练所述第一模型确定的。

4.根据权利要求1-3任意一项所述的方法,其特征在于,若根据所述风格相似度确定所述待识别视频内容中包含与所述待识别视频内容不相关的内容,所述方法还包括:

根据所述多个视频片段间的片段边界和所述多个视频片段的播放顺序,确定基于所述片段边界相邻的第一视频片段和第二视频片段;

获取所述第一视频片段的第一内容特征和所述第二视频片段的第二内容特征;

根据所述第一内容特征和所述第二内容特征间的内容相似度,确定所述片段边界是否与所述不相关的内容的边界对应;

若对应,根据所述片段边界确定所述不相关的内容在所述待识别视频内容中所处的视频区间。

5.根据权利要求4所述的方法,其特征在于,所述第一内容特征和所述第二内容特征间的内容相似度为一阶相似度,所述方法还包括:

确定所述第一视频片段对应的第一n阶片段组,和所述第二视频片段对应的第二n阶片段组;其中,n为不小于2的整数;

其中,所述第一n阶片段组包括所述第一视频片段和与所述第一视频片段相邻的n-1个视频片段,所述第一n阶片段组中不包括所述第二视频片段;

所述第二n阶片段组包括所述第二视频片段和与所述第二视频片段相邻的n-1个视频片段,所述第二n阶片段组中不包括所述第一视频片段;

确定所述第一n阶片段组的内容特征与所述第二n阶片段组的内容特征间的n阶相似度;

所述根据所述第一内容特征和所述第二内容特征间的内容相似度,确定所述片段边界是否与所述不相关的内容的边界对应,包括:

根据所述第一内容特征和所述第二内容特征间的一阶相似度和n阶相似度,确定所述片段边界是否与所述不相关的内容的边界对应。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011137819.4/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top