[发明专利]利用标签正确性概率来注释视频有效
申请号: | 201680023743.8 | 申请日: | 2016-08-02 |
公开(公告)号: | CN107533638B | 公开(公告)日: | 2023-08-11 |
发明(设计)人: | 巴拉科利什南·瓦瑞德瑞简;乔治·托代里奇;阿波斯托尔·纳特塞夫;尼汀·坎德沃尔;苏达赫恩德拉·维娅亚纳拉辛汉;杨玮龙;桑凯希·谢帝 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/75;G06V10/774;G06V10/764;G06F16/783;G06V10/42;G06F16/78;H04N5/265 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 周亚荣;安翔 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 利用 标签 正确性 概率 注释 视频 | ||
1.一种利用实体以及所述实体在视频帧内的关联的存在概率来注释视频的计算机实现的方法,所述方法包括:
从识别视频项的特性的多个实体中识别实体,其中,所述多个实体是识别所述视频项的特性的文本描述符;
从表征所述视频项的多个特征中基于每个特征的值来选择与所述实体相关的特征集合;
使用所述特征集合来确定所述实体的分类器,所述分类器是基于所述特征集合的所述实体的线性融合模型,并且确定所述分类器包括:确定所述特征集合中的每个特征的权重向量;
基于所述特征集合来确定所述实体的聚合校准函数,所述聚合校准函数将由所述线性融合模型输出的融合得分校准到所述实体是独立视频帧的中心的概率,所述实体是独立视频帧的中心指示所述实体是视频帧的主要概念;
从视频项选择视频帧,所述视频帧具有关联于所述视频帧的关联的特征;以及
使用所述分类器和所述聚合校准函数基于所述关联的特征来确定所述实体的存在概率。
2.根据权利要求1所述的方法,还包括利用所述实体和所述实体的所述存在概率来标记所述视频帧。
3.根据权利要求1所述的方法,其中,选择与所述实体相关的特征集合的步骤包括:确定将所述多个特征中的特征的值校准到所述实体的个体存在概率的校准函数。
4.根据权利要求3所述的方法,其中,选择与所述实体相关的特征集合的步骤包括:基于所述多个特征中的每个特征的值来确定所述实体的所述个体存在概率,并且针对所述多个特征的所述实体的所述个体存在概率被归一化。
5.根据权利要求4所述的方法,其中,选择与所述实体相关的特征集合的步骤还包括:选择所述特征集合,使得与每个所选特征对应的所述实体的最大个体存在概率至少为给定阈值。
6.根据权利要求1所述的方法,其中,确定所述实体的分类器的步骤包括:使所述线性融合模型的精确度最大化并将召回率维持在至少给定阈值。
7.根据权利要求3所述的方法,其中,基于所述关联的特征来确定所述实体的存在概率的步骤包括:
使用所述校准函数,以基于与所述实体关联的每个特征来确定所述实体的个体存在概率;
通过使用所述分类器基于所述关联的特征将所述实体的所述个体存在概率组合,以确定所述融合得分;以及
使用所述聚合校准函数将所述融合得分校准到所述实体的所述存在概率。
8.根据权利要求1所述的方法,其中,所述分类器和所述聚合校准函数由机器学习模型确定,所述方法还包括:选择包括视频项的集合的训练数据,每个视频项至少具有所述特征集合中的特征,并将所述训练数据提供给所述机器学习模型。
9.根据权利要求1所述的方法,还包括基于所述视频帧的所述关联的特征来确定所述多个实体中的每个实体的存在概率。
10.根据权利要求9所述的方法,还包括:基于所述视频项的每个视频帧的所述关联的特征集合来确定所述多个实体中的每个实体的所述存在概率。
11.根据权利要求1所述的方法,还包括:
从用户接收搜索查询;以及
响应于确定所述搜索查询与所述实体匹配,将包括所述视频帧的所述视频项提供给所述用户。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201680023743.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:分体设置的蜂箱
- 下一篇:一种养蜂用可快速翻脾的巢框