[发明专利]信息处理装置、提案装置、信息处理方法和提案方法

说明书

信息处理装置(10)包括决定单元(23e)和生成单元(23f)。决定单元(23e)基于给定声音的特征量以及分割场景中的各个连接帧之间的相似度，决定分割场景的连接顺序，分割场景通过基于通过对内容进行成像获得的多视点视频分割自由视点视频来获得。生成单元(23f)生成其中按照由决定单元(23e)决定的连接顺序连接分割场景的自由视点内容。

技术领域

本公开内容涉及信息处理装置、提案装置、信息处理方法和提案方法。

背景技术

例如，存在对预先收集的关于舞蹈运动的信息与音乐之间的对应关系进行建模并且生成符合给定音乐的舞蹈视频的技术。根据这种技术，可以自动生成符合音乐的CG视频(例如，参见非专利文献1)。

引用列表

非专利文献

非专利文献1：F.Ofli、E.Erzin、Y.Yemez和A.M.Tekalp：IEEE Transactions onMultimedia，第3期第14卷(2012)。

发明内容

技术问题

然而，在常规技术中，由于是以生成CG视频为前提，因此没有考虑过通过连接实况自由视点视频来生成新的自由视点内容。当从实况自由视点视频生成新的自由视点内容时，平滑地连接自由视点视频中的对象的运动是主要挑战。

本申请是鉴于上述情况而提出的，并且本申请的目的在于提供能够生成其中对象的运动被平滑地连接的自由视点内容的信息处理装置、提案装置、信息处理方法和提案方法。

问题的解决方案

信息处理装置包括决定单元和生成单元。决定单元基于给定声音的特征量以及分割场景中的各个连接帧之间的相似度，决定分割场景的连接顺序，分割场景通过基于通过对内容进行成像获得的多视点视频分割自由视点视频来获得。生成单元生成其中按照由决定单元决定的连接顺序连接分割场景的自由视点内容。

根据实施方式的一个方面，可以生成其中对象的运动被平滑地连接的实况自由视点内容。

附图说明

图1是示出根据实施方式的提供系统的概要的图。

图2是示出根据实施方式的提供系统的配置示例的框图。

图3是示出根据实施方式的生成分割场景的示例的图。

图4是示出分割场景的变化的示例的图。

图5是示出根据实施方式的场景信息DB的示例的图。

图6是根据实施方式的候选路径的示意图。

图7是示出连接评分与音乐评分之间的对应关系的图。

图8是休止符区间与连接场景之间的对应关系的示意图。

图9是示出相邻帧的示例的图。

图10是示出由根据实施方式的场景信息生成装置执行的处理过程的流程图。

图11是示出由根据实施方式的信息处理装置执行的处理过程的流程图。

图12是示出图11所示的步骤S204的处理过程的(第1)流程图。

图13是示出图11所示的步骤S204的处理过程的(第2)流程图。

图14是示出图11所示的步骤S207的处理过程的流程图。

图15是示出根据第二实施方式的提供系统的配置示例的图。

图16是示出根据实施方式的提案装置的配置示例的框图。