[发明专利]创建概要的方法

说明书

发明领域

本发明涉及一种创建内容项目的概要的方法，该内容项目包括多 个片段，每个片段具有各自的重要性分数。

发明背景

配备有视频捕获功能的消费者设备的实用性和可负担性已经在近 些年得到增长。这使得用户能够记录他们在他们生活中经历的许多事 件。这进而又导致庞大数量的由单个用户制作的视听素材。观看完整 长度的录像是相当消耗时间的并且是乏味的，由于有趣的视听素材与 缺乏吸引力的视听素材混合在一起。多种技术已经被开发出来以创建 任意视听内容项目的概要。

出版物CHI Letters，2000，第2卷，第81-89页，A.Girgensohn， J.Boreczky等人的“A semi-automatic approach to home video editing”公开了一种系统，其允许用户使用标准视频摄像机从原始视 频镜头中容易地创建定制视频。系统使用自动分析以确定原始视频各 部分的适合性。不合适的视频具有快速或不稳定的摄像机运动。基于 这个分析，对于视频的每个帧，计算出用数字表示的“不适合性”分数。 结合编辑规则，这个分数被用于识别用于包括在最终视频概要中的片 段(在原始公开中使用术语“剪辑”)，并且被用于选择它们的开始和结束 点。为了创建定制视频，用户通过将对应于期望片段的关键帧拖入概要中来选择 片段。

这个方法仅仅允许选择适合包括在概要中的片段，所述选择基于与摄像机运 动有关的内容分析。而选择的片段很可能关于摄像机运动是高质量的，对于均匀 质量的视频素材，这会导致用户相当随机地选择片段。

发明概述

本发明的一个目的是提供一种增强的创建内容项目的概要的方法，该内容项 目包括多个片段，每个片段具有各自的重要性分数，其至少部分地减少了上述情 形。

根据本发明，以上面提到的方法实现这个目的，该方法特征在于：为多个潜 在切割点(cut point)的每一个导出切割点重要性分数，每个潜在切割点是两 个相应的片段之间的边界，特定潜在切割点的切割点重要性分数基于与所述潜在 切割点对齐的两个片段的内容特性，以及创建概要，该概要包括基于片段重要性 分数和切割点重要性分数的组合而选择的内容项目的多个片段的子集。

内容项目包括多个片段。潜在切割点被定义为两个相邻片段之间的边界，即 内容项目中可能发生片段分离的点。根据本发明，为每个潜在切割点得出切割点 重要性分数。特定的潜在切割点的切割点重要性分数基于与潜在切割点相邻的两 个片段的内容特性。内容特性包括诸如亮度或音频等级的分量(component)。从 而本发明有利地结合了切割点重要性分数和片段重要性分数来选择应当组成概 要的那些片段。

作为结果产生的概要提供了改善的即更一致的对进入概要的片段的选择，所 述概要具有提供给用户的改善的呈现质量。对于相当均匀质量的视频内容，这尤 其相关。所建议的方法提供了防止选择片段使得例如在片段中包含的句子被突然 地切割，或者背景音乐的音乐小节被中断的手段。

在一个实施方式中，潜在切割点的切割点重要性分数是内容特性的加权范数 (weighted norms)的绝对差，该内容特性对应于与所述潜在切割点对齐的两个 片段。内容特性的分量对应于不同特征，并且因此这些分量的值在不同范围内。 通过权重按比例调整这些不同分量值以将它们导入相同的范围，并因此使得它们 的比较成为可能。在加权范数中的权重还能够被用于表示特定分量的相关性。加 权范数是一维的，因此允许容易地比较对应于与切割点对齐的片段的多维内容特 性。对齐片段的加权范数的差导致产生潜在切割点的切割点重要性分数。

在一个实施方式中，在相邻片段的内容特性的至少一个分量中重大的改变处 确定潜在切割点。内容特性的至少一个分量中的重大的改变导致切割点重要性分 数的增加。切割点重要性分数越高，该潜在切割点是越合适的。因此将潜在切割 点置于内容特性的至少一个分量中发生重大改变的点是有优势地，尤其对于相当 均匀的视频内容。

在一个实施方式中，将被包括在概要中的片段子集的适合性通过适合性分数 被测量，所述适合性分数是以下各项的加权总和：