[发明专利]动画合成装置、动画合成方法以及记录介质

说明书

本发明通过外侧照相机(17)拍摄实拍动画，并且通过内侧照相机(16)拍摄发布者，化身控制部(13)根据由内侧照相机(16)拍摄到的发布者的图像来控制化身，并且根据动画合成装置(1)的实际空间坐标系中的位置来移动化身的实际空间坐标系中的位置，合成部(14)将化身配置在实际空间坐标系的规定位置，并将化身合成到实拍动画中。

技术领域

本公开涉及生成增强现实动画的技术。

背景技术

近年来，个人能够经由网络发布影像的动画发布服务正在普及。在动画发布服务中，已知具有能够代替用户而使计算机图形(CG)角色出现在影像内并发布影像的应用。此外，已知具有对由智能手机自拍到的脸进行面部追踪，将用户的表情反映到CG角色的技术。

现有技术文献

专利文献

专利文献1：日本特开2017-188787号公报

发明内容

在使用面部追踪技术将CG角色合成到自拍动画中时，能够将实时地反映了用户自身的表情的CG角色简单地合成到实拍影像中。

但是，所拍摄的实拍影像是用户背后的风景。在以在用户的眼前扩展的风景为背景来合成反映了用户自身的表情的CG角色的情况下，用户需要使用自拍棒以想要拍摄的风景为背景并包含用户自身来进行拍摄。

本发明是鉴于上述情况而完成的，其目的在于，更简单地生成合成了表情丰富的计算机图形角色的动画。

实施方式的第一方式的动画合成装置生成将化身合成到实拍动画中的增强现实动画，具有：第一摄像部，其拍摄实拍动画；第二摄像部，其拍摄操作者；位置检测部，其对所述第一摄像部或者所述动画合成装置的与实际空间对应的坐标系中的位置以及朝向进行检测；控制部，其根据所述第二摄像部拍摄到的图像来控制化身，并且与所述第一摄像部或所述动画合成装置的移动相配合地使所述化身在所述坐标系中的位置移动；以及合成部，其将所述化身配置在所述坐标系的规定位置，将所述化身合成到所述第一摄像部拍摄到的所述实拍动画中。

实施方式的第二方式的动画合成方法生成将化身合成到实拍动画中的增强现实动画，所述动画合成方法具有由计算机进行的以下步骤：对拍摄实拍动画的第一摄像部的与实际空间对应的坐标系中的位置以及朝向进行检测的步骤；根据拍摄操作者的第二摄像部拍摄到的图像来控制化身的步骤；与所述第一摄像部的移动相配合地使所述化身在所述坐标系中的位置移动的步骤；以及将所述化身配置在所述坐标系的规定位置，将所述化身合成到所述第一摄像部拍摄到的所述实拍动画中的步骤。

实施方式的第三方式的记录介质能够由计算机读取，其记录有使处理器执行以下处理的程序：对拍摄实拍动画的第一摄像部的与实际空间对应的坐标系中的位置以及朝向进行检测的处理；根据拍摄操作者的第二摄像部拍摄到的图像来控制化身的处理；与所述第一摄像部的移动相配合地使所述化身在所述坐标系中的位置移动的处理；以及将所述化身配置在所述坐标系的规定位置，将所述化身合成到所述第一摄像部拍摄到的所述实拍动画中的处理。

根据实施方式，能够更简单地生成合成了表情丰富的计算机图形角色的动画。

附图说明

图1是表示包含本实施方式的动画合成装置的动画发布系统的整体结构的整体结构图。

图2是用于对发布者发布AR动画的情况进行说明的图。

图3是示出向右平移拍摄方向时的AR动画的例子的图。

图4是表示本实施方式的动画合成装置的结构例的功能框图。

图5是表示化身的初始配置处理的流程的流程图。

图6是表示在拍摄到的影像上重叠显示了检测出的地面部分的例子的图。

图7是表示使化身站立在图6的地面部分的例子的图。