[发明专利]用于基于脸部表情的概括的方法和装置

权利要求书

1.一种方法，包括：

接收一个或者多个第一帧和一个或者多个第二帧；

确定关于在所述一个或者多个第二帧中包含的一个或者多个脸部表情的信息；以及

使得关于所述一个或者多个脸部表情的所述信息与所述一个或者多个第一帧中的至少一个第一帧关联。

2.根据权利要求1所述的方法，其中：

所述一个或者多个第一帧包括第一静止图像并且所述一个或者多个第二帧包括第二静止图像；

确定关于在所述一个或者多个第二帧中包含的一个或者多个脸部表情的信息包括确定关于在所述第二静止图像中包含的一个或者多个脸部表情的信息；以及

使得关于所述一个或者多个脸部表情的所述信息与所述一个或者多个第一帧中的至少一个第一帧关联包括使得所述第一静止图像用关于在所述第二静止图像中包含的所述一个或者多个脸部表情的所述信息的指示被标记。

3.根据权利要求1所述的方法，其中：

所述一个或者多个第一帧包括第一多个视频帧并且所述一个或者多个第二帧包括第二多个视频帧，所述方法还包括在所述第一多个视频帧中确定至少一个视频段；

确定关于在所述一个或者多个第二帧中包含的一个或者多个脸部表情的信息包括在所述第二多个视频帧中检测至少一个脸部表情改变并且至少部分基于所述至少一个脸部表情改变来确定所述至少一个视频段的至少一个关键帧；以及

使得关于所述一个或者多个脸部表情的所述信息与所述一个或者多个第一帧中的至少一个第一帧关联包括使得所述至少一个关键帧与所述至少一个视频段关联。

4.根据权利要求3所述的方法，其中在所述第一多个视频帧中确定至少一个视频段包括确定至少一个潜在段边界。

5.根据权利要求4所述的方法，其中确定至少一个潜在段边界包括计算用于所述第一多个视频帧中的帧的差值并且比较一个或者多个所述差值与门限，所述方法还包括在其中差值被确定为超过所述门限的实例中选择跟随其差值超过所述门限的所述帧的一个或者多个帧以用于进一步处理。

6.根据权利要求5所述的方法，还包括使得所述门限基于一个或者多个先前帧的融合值被调整。

7.根据权利要求5或者6所述的方法，还包括使得所述门限根据焦距被调整。

8.根据权利要求5至7中的任一权利要求所述的方法，还包括计算用于被选择用于进一步处理的帧的差值，所述方法还包括在其中为预定数目的连续帧而计算的所述差值未超过所述门限值的实例中选择在其差值未超过所述门限并且被选择用于进一步处理的所述连续帧中的最后连续帧之前的所述帧中的一个或者多个帧以用于更进一步处理。

9.根据权利要求8所述的方法，还包括计算用于被选择用于更进一步处理的所述帧的累计运动矢量；其中确定至少一个视频段包括至少部分基于所述累计运动矢量确定被选择用于更进一步处理的所述一个或者多个帧是否包括视频段。

10.根据权利要求8或者9所述的方法，还包括计算在被选择用于更进一步处理的所述帧中的第一帧与最后帧之间的差；其中确定至少一个视频段包括或者还包括至少部分基于在被选择用于更进一步处理的所述帧中的所述第一帧与所述最后帧之间的所述差确定被选择用于更进一步处理的所述一个或者多个帧是否包括视频段。

11.根据权利要求5至10中的任一权利要求所述的方法，其中计算帧的所述差值包括计算在所述帧与相邻帧之间的像素差。

12.根据权利要求5至11中的任一权利要求所述的方法，其中计算帧的所述差值包括或者还包括计算在所述帧与相邻帧之间的块色直方图差。

13.根据权利要求3至12中的任一权利要求所述的方法，其中至少部分基于所述至少一个脸部表情改变来确定所述至少一个视频段的至少一个关键帧包括选择所述至少一个视频段的最后帧作为初始关键帧并且基于与检测到的所述脸部表情改变对应的一个或者多个帧更新所述关键帧。

14.根据权利要求3至13中的任一权利要求所述的方法，还包括使得所述关键帧被呈现作为所述至少一个视频段的标识符。

15.根据权利要求1至14中的任一权利要求所述的方法，其中所述一个或者多个第一帧和所述一个或者多个第二帧在基本上相同时间被接收。