[发明专利]反应性简档肖像在审
申请号: | 201880040351.1 | 申请日: | 2018-04-13 |
公开(公告)号: | CN110753933A | 公开(公告)日: | 2020-02-04 |
发明(设计)人: | 哈达尔·艾勒;迈克尔·科恩;约翰尼斯·科普夫 | 申请(专利权)人: | 脸谱公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 11262 北京安信方达知识产权代理有限公司 | 代理人: | 陆建萍;杨明钊 |
地址: | 美国加利*** | 国省代码: | 美国;US |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 目标用户 简档 反应性 观看 媒体网站 内容相关 实时反应 视频片段 视频输入 输入图像 在线系统 自动生成 图像 关联 图片 情绪 | ||
1.一种方法,包括:
由在线系统的服务器接收描绘目标个体的肖像的输入视频;
在所述输入视频的每个帧中检测所述目标个体的面部特征点的位置;
从所述输入视频获得描绘处于中性表情的所述目标个体的空闲帧;
将所述空闲帧中的所述目标个体的面部特征点的基线位置与所述输入视频的每个非空闲帧中的面部特征点的位置进行比较,以生成所述空闲帧与每个所述非空闲帧之间的相应的距离度量;
识别所述相应的距离度量达到第一局部峰值的第一峰值表情帧;
识别所述第一峰值表情帧之前的第一起始帧和所述第一峰值表情之后的第一结束帧;
生成包括第一范围的帧的第一情绪片段,所述第一范围的帧在所述第一起始帧处开始,并在所述第一结束帧处结束;以及
将所述第一情绪片段存储到存储介质。
2.根据权利要求1所述的方法,还包括:
识别所述相应的距离度量达到第二局部峰值的第二峰值表情帧;
识别所述第二峰值表情帧之前的第二起始帧和所述第二峰值表情之后的第二结束帧;
生成包括第二范围的帧的第二情绪片段,所述第二范围的帧在所述第二起始帧处开始,并在所述第二结束帧处结束;以及
将所述第二情绪片段存储到所述存储介质。
3.根据权利要求1所述的方法,其中,将所述第一情绪片段存储到所述存储介质包括:
确定与所述第一峰值表情帧相关联的时间位置;
从查找表识别与所述时间位置相关联的预期情绪;
生成表示与所述第一情绪片段相关联的预期情绪的元数据标签;以及
将所述元数据标签与所述第一情绪片段相关联地存储。
4.根据权利要求1所述的方法,其中,将所述第一情绪片段存储到所述存储介质包括:
实施面部分析以识别与所述第一情绪片段相关联的情绪;
生成表示与所述第一情绪片段相关联的情绪的元数据标签;以及
将所述元数据标签与所述第一情绪片段相关联地存储。
5.根据权利要求1所述的方法,其中,获得所述视频中的所述空闲帧包括:
识别包括一定范围的帧的空闲片段;
检测所述空闲片段内满足具有在满足预定义标准的位置中的面部特征点的帧;以及
将满足所述预定义标准的帧分配为所述空闲帧。
6.根据权利要求1所述的方法,其中,获得所述视频中的所述空闲帧包括:
识别包括一定范围的帧的空闲片段;以及
通过对所述空闲片段中的所述一定范围的帧求平均值来合成所述空闲帧。
7.根据权利要求1所述的方法,其中,识别所述第一起始帧和所述第一结束帧包括:
在所述第一峰值表情帧之前的预定义的范围内识别起始范围的帧;
从所述起始范围的帧中选择与所述空闲帧具有最佳匹配的所述第一起始帧;
在所述第一峰值表情帧之后的预定义的范围内识别结束范围的帧;以及
从所述结束范围的帧中选择与所述空闲帧具有最佳匹配的所述第一结束帧。
8.一种非暂时性计算机可读存储介质,其存储能够由处理器执行的指令,所述指令在被执行时使得所述处理器实施包括以下项的步骤:
由在线系统的服务器接收描绘目标个体的肖像的输入视频;
在所述输入视频的每个帧中检测所述目标个体的面部特征点的位置;
从所述输入视频获得描绘处于中性表情的所述目标个体的空闲帧;
将所述空闲帧中的所述目标个体的面部特征点的基线位置与所述输入视频的每个非空闲帧中的面部特征点的位置进行比较,以生成所述空闲帧与每个所述非空闲帧之间的相应的距离度量;
识别所述相应的距离度量达到第一局部峰值的第一峰值表情帧;
识别所述第一峰值表情帧之前的第一起始帧和所述第一峰值表情之后的第一结束帧;
生成包括第一范围的帧的第一情绪片段,所述第一范围的帧在所述第一起始帧处开始,并在所述第一结束帧处结束;以及
将所述第一情绪片段存储到存储介质。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于脸谱公司,未经脸谱公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201880040351.1/1.html,转载请声明来源钻瓜专利网。