[发明专利]一种视频内容识别方法和相关装置在审
申请号: | 202011137819.4 | 申请日: | 2020-10-22 |
公开(公告)号: | CN112270238A | 公开(公告)日: | 2021-01-26 |
发明(设计)人: | 禹常隆;田植良 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王兆林 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 内容 识别 方法 相关 装置 | ||
1.一种视频内容识别方法,其特征在于,所述方法包括:
对待识别视频内容进行视频分段,得到多个视频片段;
获取所述多个视频片段分别对应的风格向量;
对获取的所述风格向量进行相似度聚类,得到第一风格聚类和第二风格聚类;
确定所述第一风格聚类对应的风格向量与所述第二风格聚类对应的风格向量之间的风格相似度;
根据所述风格相似度确定所述待识别视频内容中是否包含与所述待识别视频内容不相关的内容。
2.根据权利要求1所述的方法,其特征在于,所述确定所述第一风格聚类对应的风格向量与所述第二风格聚类对应的风格向量之间的风格相似度,包括:
通过第一模型确定所述第一风格聚类对应的风格向量与所述第二风格聚类对应的风格向量之间的风格相似度;
所述第一模型通过如下方式训练得到:
确定包括第一样本和第二样本的训练样本对,所述第一样本为不包含不相关内容的第一样本视频内容,所述第二样本为包含不相关内容的第二样本视频内容;
根据所述第一样本所包括视频片段的风格向量,通过第一初始模型确定所述第一样本的两个风格聚类的风格向量之间的正样本风格相似度;
根据所述第二样本所包括视频片段的风格向量,通过所述第一初始模型确定所述第二样本的两个风格聚类的风格向量之间的负样本风格相似度;
基于增加所述正样本风格相似度和所述负样本风格相似度间的差别,对所述第一初始模型进行训练,得到所述第一模型。
3.根据权利要求2所述的方法,其特征在于,所述根据所述风格相似度确定所述待识别视频内容中是否包含与所述待识别视频内容不相关的内容,包括:
若所述风格相似度满足相似度阈值,确定所述待识别视频内容中不包含与所述待识别视频内容不相关的内容;
若所述风格相似度不满足相似度阈值,确定所述待识别视频内容中包含与所述待识别视频内容不相关的内容;
其中所述相似度阈值是通过训练所述第一模型确定的。
4.根据权利要求1-3任意一项所述的方法,其特征在于,若根据所述风格相似度确定所述待识别视频内容中包含与所述待识别视频内容不相关的内容,所述方法还包括:
根据所述多个视频片段间的片段边界和所述多个视频片段的播放顺序,确定基于所述片段边界相邻的第一视频片段和第二视频片段;
获取所述第一视频片段的第一内容特征和所述第二视频片段的第二内容特征;
根据所述第一内容特征和所述第二内容特征间的内容相似度,确定所述片段边界是否与所述不相关的内容的边界对应;
若对应,根据所述片段边界确定所述不相关的内容在所述待识别视频内容中所处的视频区间。
5.根据权利要求4所述的方法,其特征在于,所述第一内容特征和所述第二内容特征间的内容相似度为一阶相似度,所述方法还包括:
确定所述第一视频片段对应的第一n阶片段组,和所述第二视频片段对应的第二n阶片段组;其中,n为不小于2的整数;
其中,所述第一n阶片段组包括所述第一视频片段和与所述第一视频片段相邻的n-1个视频片段,所述第一n阶片段组中不包括所述第二视频片段;
所述第二n阶片段组包括所述第二视频片段和与所述第二视频片段相邻的n-1个视频片段,所述第二n阶片段组中不包括所述第一视频片段;
确定所述第一n阶片段组的内容特征与所述第二n阶片段组的内容特征间的n阶相似度;
所述根据所述第一内容特征和所述第二内容特征间的内容相似度,确定所述片段边界是否与所述不相关的内容的边界对应,包括:
根据所述第一内容特征和所述第二内容特征间的一阶相似度和n阶相似度,确定所述片段边界是否与所述不相关的内容的边界对应。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011137819.4/1.html,转载请声明来源钻瓜专利网。
- 内容再现系统、内容提供方法、内容再现装置、内容提供装置、内容再现程序和内容提供程序
- 内容记录系统、内容记录方法、内容记录设备和内容接收设备
- 内容服务系统、内容服务器、内容终端及内容服务方法
- 内容分发系统、内容分发装置、内容再生终端及内容分发方法
- 内容发布、内容获取的方法、内容发布装置及内容传播系统
- 内容提供装置、内容提供方法、内容再现装置、内容再现方法
- 内容传输设备、内容传输方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容发送设备、内容发送方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容再现装置、内容再现方法、内容再现程序及内容提供系统
- 内容记录装置、内容编辑装置、内容再生装置、内容记录方法、内容编辑方法、以及内容再生方法