[发明专利]从视频游戏片段生成视听内容的方法和系统

说明书

提供了一种从视频游戏片段生成视听内容的方法。该方法包括获得用户选择的音轨和获得视频游戏片段。对音轨执行统计分析，以确定与音轨的相应部分相关联的兴奋度。对视频游戏片段执行统计分析，以确定与视频游戏片段的相应部分相关联的兴奋度。基于确定的兴奋度中的对应关系，将视频游戏片段的部分与音轨的部分进行匹配。基于所述匹配，生成包括视频游戏片段的部分的合成视听内容，该视频游戏片段与音轨的相应部分匹配。这样，视频片段中的平稳和令人兴奋的时刻会与音轨中的相应时刻匹配。还提供了相应的系统。

技术领域

本公开涉及一种从视频游戏片段(footage)生成视听内容的方法和一种用于从视频游戏片段生成视听内容的系统。

背景技术

通常期望从视频游戏片段生成视频内容。例如，在视频游戏锦标赛结束时，可能希望生成与视频游戏锦标赛中发生的任何高光(highlight)和/乌龙(blooper)相对应的编译视频。在某些情况下，玩家可能只是希望回看一些他们的游戏玩法，无论是单个视频游戏会话还是相同或不同视频游戏的多个会话。当前，有许多在线视频频道利用视频游戏片段，其中一些吸引了超过一千万的关注者。

通过添加背景音乐可以增强从视频游戏片段生成的视频内容。例如，可能期望在视频游戏片段中具有特别戏剧性的时刻与音乐曲目中的相应戏剧性时刻匹配。类似地，可能期望在视频游戏片段中具有与相同音轨的较平稳部分匹配的较平稳的时刻。音乐的引入通常会为观众带来更具吸引力的视频。更一般而言，玩家可能希望使用自己或他人的视频游戏片段来生成音乐视频。

通常，通过后处理软件可以从视频游戏片段创建视频内容。例如，PS4提供了‘SHAREfactory’^TM，玩家可以在其中编辑其PS4捕获的游戏玩法视频。通常，诸如此类的软件允许用户导入和编辑视频片段，以及导入音频以伴随导入的视频片段，以创建最终视频。通常，用户将必须在时间轴内移动和修剪不同的视频片段，以便将任何高光瞬间与导入的音频的相应令人兴奋的部分同步(同样，将低光时刻与音频的较平稳部分同步)。用户通常会判断视频游戏片段是否以适当的方式伴有音频。这可能会导致视频游戏片段中发生的高光时刻与用户原本打算伴随这些时刻的音频部分之间出现轻微的不匹配。

某些视频编辑软件可能会提供有关用户已导入歌曲的信息，诸如节拍的定时。然后，用户可以使用此信息在时间轴上修剪或定位视频片段，以便可以将视频中的剪辑和过渡定为歌曲中的节拍。但是，以这种方式创建视频内容对于用户来说仍然是一个费力的过程，在某些情况下，节拍可能不一定表示歌曲的片段是否实际上对应于歌曲的“令人兴奋”的部分。

本发明试图减轻这些问题。

发明内容

根据本文公开的第一方面，提供了根据权利要求1至11中的任一项所述的用于从视频游戏片段生成视听内容的方法。

根据本文公开的第二方面，提供了根据权利要求13至25中的任一项所述的用于从视频游戏片段生成视听内容的系统。

附图说明

为了帮助理解本公开并示出实施例如何生效，通过示例的方式参考附图，其中：

图1示意性地示出了视频游戏播放设备的示例；

图2示意性地示出了根据本公开的用于生成视听内容的方法的示例；

图3A示出了音轨的频谱图的示例；

图3B示出了音轨的两个部分的示例，每个部分具有不同的饱满度；

图4示出了正态分布和相应的z得分(z-scores)的示例；

图5示出了视频游戏的连续视频帧的示例，以及表示这些帧之间的像素强度差异的帧；

图6示意性地示出了LAB颜色空间的示例；