[发明专利]基于视频的处理方法、设备和可读介质

说明书

本申请实施例提供了一种基于视频的处理方法、设备和可读介质，以更准确、自然的驱动虚拟形象执行动作。所述方法包括：获取骨骼动作片段，将所述骨骼动作片段划分为骨骼动作子片段；采用所述骨骼动作子片段确定节点，依据所述骨骼动作子片段之间的运动信息确定边，构建骨骼动作连接图；获取目标信息；依据所述目标信息和骨骼动作连接图中的骨骼动作子片段，匹配目标子片段及其关联子片段；对所述目标子片段和关联子片段进行拼接，并结合所述目标信息构成视频数据；输出所述视频数据。可拼接成动作平滑过渡的视频，使得视频数据中虚拟用户的动作自然、流畅，能够准确、自然的生成虚拟形象执行动作的视频。

技术领域

本申请涉及计算机技术领域，特别是涉及一种基于视频的处理方法、一种直播处理方法、一种视频生成方法、一种终端设备和一种机器可读介质。

背景技术

动画通常是通过绘制每帧的图片，生成相应的动画视频。动画图片是基于动画的固定情节绘制的，相应的，动画中的对象如人物、动物等通常只是几个固定的动作，形成动态效果即可。

目前有一些3D人物的虚拟形象可以进行歌舞表演，然而，这些虚拟形象只能执行几个固定的动作，并且动作比较机械和僵硬，因此，本领域技术人员亟需解决的一个技术问题在于：如何更准确、自然的驱动虚拟形象执行动作。

发明内容

本申请实施例提供了一种基于视频的处理方法，以更准确、自然的驱动虚拟形象执行动作。

相应的，本申请实施例还提供了一种直播处理方法、一种视频生成方法、一种电子设备和一种机器可读介质，用以保证上述方法的实现及应用。

为了解决上述问题，本申请实施例公开了一种基于视频的处理方法，所述方法包括：获取骨骼动作片段，将所述骨骼动作片段划分为骨骼动作子片段；采用所述骨骼动作子片段确定节点，依据所述骨骼动作子片段之间的运动信息确定边，构建骨骼动作连接图；获取目标信息；依据所述目标信息和骨骼动作连接图中的骨骼动作子片段，匹配目标子片段及其关联子片段；对所述目标子片段和关联子片段进行拼接，并结合所述目标信息构成视频数据；输出所述视频数据。

可选的，所述将骨骼动作片段划分为骨骼动作子片段，包括：获取骨骼动作片段；对所述骨骼动作片段中各帧图像中虚拟形象的目标关节点进行检测，确定运动强度信息；依据所述运动强度信息判断相邻两帧图像之间的差异值；依据所述差异值确定切分点，将所述骨骼动作片段依据切分点切分为多个骨骼动作子片段

可选的，所述采用所述骨骼动作子片段确定节点，依据所述骨骼动作子片段之间的运动信息确定边，构建骨骼动作连接图，包括：依据骨骼动作子片段确定节点的节点信息；确定两个节点对应骨骼动作子片段之间的运动相似度，依据所述运动相似度确定所述两个节点之间的边；依据所述节点和边，创建骨骼动作连接图。

可选的，所述确定两个节点对应骨骼动作子片段之间的运动相似度，依据所述运动相似度确定所述两个节点之间的边，包括：确定两个节点对应骨骼动作子片段，依据所述骨骼动作子片段中目标关节点，确定对应的运动相似度，所述运动相似度包括：姿态相似度和/或速度相似度；在所述运动相似度满足相似阈值时，创建边连接两个节点。、

可选的，还包括：在编辑页面显示所述骨骼动作连接图；响应于对所述骨骼动作连接图的调整操作，对相应的节点进行调整。

可选的，所述依据所述目标信息和骨骼动作连接图中的骨骼动作子片段，匹配目标子片段及其关联子片段，包括：采用所述目标信息匹配目标子片段，所述目标子片段为包括虚拟形象执行动作的片段；基于所述目标子片段匹配骨骼动作连接图，确定所述目标子片段的关联子片段。

可选的，还包括：对所述目标信息进行分析，确定对应的节点匹配信息，所述节点匹配信息包括以下至少一种：语义信息、基音信息、节奏信息。