[发明专利]基于视频的处理方法、设备和可读介质

权利要求书

1.一种基于视频的处理方法，其特征在于，所述方法包括：

获取骨骼动作片段，将所述骨骼动作片段依据切分点划分为多个骨骼动作子片段，所述切分点依据相邻两帧图像之间的差异值确定，所述差异值依据骨骼动作片段中各帧图像中虚拟形象的目标关节点的运动强度信息确定；

采用所述骨骼动作子片段确定节点，依据所述骨骼动作子片段之间的运动信息确定边，构建骨骼动作连接图；

获取目标信息，对所述目标信息进行分析，确定节点匹配信息，所述节点匹配信息包括以下至少一种：语义信息、基音信息和节奏信息，其中，所述语义信息对应语义动作，所述基音信息对应随机动作，所述节奏信息对应舞蹈动作；

采用所述节点匹配信息匹配目标子片段；

基于所述目标子片段匹配骨骼动作连接图，确定所述目标子片段的关联子片段；

对所述目标子片段和关联子片段进行拼接，并结合所述目标信息构成视频数据；

输出所述视频数据。

2.根据权利要求1所述的方法，其特征在于，所述将所述 骨骼动作片段依据切分点划分为多个骨骼动作子片段，包括：

对所述骨骼动作片段中各帧图像中虚拟形象的目标关节点进行检测，确定运动强度信息；

依据所述运动强度信息判断相邻两帧图像之间的差异值；

依据所述差异值确定切分点，将所述骨骼动作片段依据切分点切分为多个骨骼动作子片段。

3.根据权利要求1所述的方法，其特征在于，所述采用所述骨骼动作子片段确定节点，依据所述骨骼动作子片段之间的运动信息确定边，构建骨骼动作连接图，包括：

依据骨骼动作子片段确定节点的节点信息；

确定两个节点对应骨骼动作子片段之间的运动相似度，依据所述运动相似度确定所述两个节点之间的边；

依据所述节点和边，创建骨骼动作连接图。

4.根据权利要求3所述的方法，其特征在于，所述确定两个节点对应骨骼动作子片段之间的运动相似度，依据所述运动相似度确定所述两个节点之间的边，包括：

确定两个节点对应骨骼动作子片段，依据所述骨骼动作子片段中目标关节点，确定对应的运动相似度，所述运动相似度包括：姿态相似度和/或速度相似度；

在所述运动相似度满足相似阈值时，创建边连接两个节点。

5.根据权利要求1所述的方法，其特征在于，还包括：

在编辑页面显示所述骨骼动作连接图；

响应于对所述骨骼动作连接图的调整操作，对相应的节点进行调整。

6.根据权利要求1所述的方法，其特征在于，对所述目标信息进行分析，确定以下至少一种节点匹配信息的步骤包括：

若所述目标信息为文本信息，对所述文本信息进行语义分析，确定语义信息；

若所述目标信息为语音信息，对所述语音信息进行音频分析，确定基音信息；

若所述目标信息为音频信息，对所述音频信息进行音频分析，确定节奏信息；

所述采用所述目标信息匹配目标子片段，包括以下至少一种步骤：

依据所述语义信息匹配语义动作对应的目标子片段；

依据所述基音信息匹配随机动作对应的目标子片段；

依据所述节奏信息匹配舞蹈动作对应的目标子片段。

7.根据权利要求1所述的方法，其特征在于，所述基于所述目标子片段匹配骨骼动作连接图，确定所述目标子片段的关联子片段，包括：

在所述骨骼动作连接图中确定目标子片段对应的目标节点；

在所述骨骼动作连接图中匹配所述目标节点连接的至少一个关联节点，将所述关联节点对应的子片段作为关联子片段。

8.根据权利要求5所述的方法，其特征在于，所述对所述目标子片段和关联子片段进行拼接，并结合所述目标信息构成视频数据，包括：

对所述目标子片段和关联子片段进行拼接，得到骨骼动作片段；

确定所述目标信息对应的音频信息；

对所述骨骼动作片段进行渲染，并结合音频信息，生成对应视频数据。