[发明专利]一种视频描述内容的生成方法及装置在审
申请号: | 201711022739.2 | 申请日: | 2017-10-27 |
公开(公告)号: | CN109729421A | 公开(公告)日: | 2019-05-07 |
发明(设计)人: | 王往 | 申请(专利权)人: | 优酷网络技术(北京)有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/472 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 李辉;陈刚 |
地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 画面帧 视觉特征 视频描述 判定 目标画面 目标视频 表征用户 描述内容 内容符合 视频内容 申请 关联 展示 | ||
1.一种视频描述内容的生成方法,其特征在于,提供有视觉特征,所述视觉特征用于表征用户感兴趣的视频内容,所述视觉特征与判定策略相关联;所述方法包括:
识别目标视频中包含的画面帧,并从所述画面帧中确定出展示所述视觉特征的候选画面帧;
对所述候选画面帧的内容进行判定,并从所述候选画面帧中确定内容符合所述判定策略的目标画面帧;
基于所述目标画面帧,生成所述目标视频的描述内容。
2.根据权利要求1所述的方法,其特征在于,所述视觉特征包括人物面容;相应地,与所述人物面容相关联的判定策略用于限定人物面容对应的有效转动范围;其中,所述有效转动范围中包括多个转动角度,所述转动角度与面容模板相关联。
3.根据权利要求2所述的方法,其特征在于,从所述候选画面帧中确定内容符合所述判定策略的目标画面帧包括:
检测所述候选画面帧中所展示的人物面容,并计算所述候选画面帧中的人物面容与所述面容模板之间的相似度;
当计算得到的相似度中存在大于或者等于指定阈值的相似度时,将所述候选画面帧作为符合所述判定策略的目标画面帧。
4.根据权利要求1所述的方法,其特征在于,所述视觉特征包括人物面容,与所述人物面容相关联的判定策略用于限定人物面容在当前画面中所占的最低比例;相应地,从所述候选画面帧中确定内容符合所述判定策略的目标画面帧包括:
检测所述候选画面帧中所展示的人物面容,并计算所述候选画面帧中的人物面容在所述候选画面帧中所占的比例;
当计算得到的比例大于或者等于所述最低比例时,将所述候选画面帧作为符合所述判定策略的目标画面帧。
5.根据权利要求1所述的方法,其特征在于,所述视觉特征包括面容情绪,与所述面容情绪相关联的判定策略用于限定面容情绪的类型,所述面容情绪的类型与表情模板相关联;
相应地,从所述候选画面帧中确定内容符合所述判定策略的目标画面帧包括:
检测所述候选画面帧中所展示的面容表情,并计算所述面容表情与表情模板之间的相似度;
当计算得到的相似度中存在大于或者等于指定阈值的相似度时,将所述候选画面帧作为符合所述判定策略的目标画面帧。
6.根据权利要求5所述的方法,其特征在于,与所述面容情绪相关联的判定策略还用于限定面容表情在当前画面中所占的最低比例;相应地,在计算得到的相似度中存在大于或者等于指定阈值的相似度之后,所述方法还包括:
计算所述面容表情在所述候选画面帧中所占的比例;
当计算得到的比例大于或者等于所述最低比例时,将所述候选画面帧作为符合所述判定策略的目标画面帧。
7.根据权利要求1所述的方法,其特征在于,所述视觉特征包括人物动作,与所述人物动作相关联的判定策略用于限定人物所展示的动作模板;
相应地,从所述候选画面帧中确定内容符合所述判定策略的目标画面帧包括:
识别所述候选画面帧中人物所展示的动作,并判断识别的所述动作是否包含于所述动作模板中,若是,将所述候选画面帧作为符合所述判定策略的目标画面帧。
8.根据权利要求1所述的方法,其特征在于,所述视觉特征包括人物服饰,与所述人物服饰相关联的判定策略用于限定人物服饰的颜色以及款式;
相应地,从所述候选画面帧中确定内容符合所述判定策略的目标画面帧包括:
识别所述候选画面帧中人物服饰的颜色以及款式,并当识别出的颜色和/或款式与所述判定策略限定的颜色和/或款式相匹配时,将所述候选画面帧作为符合所述判定策略的目标画面帧。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于优酷网络技术(北京)有限公司,未经优酷网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711022739.2/1.html,转载请声明来源钻瓜专利网。