[发明专利]一种牙齿矫正的动画合成方法、装置、设备及存储介质

说明书

本发明提供了一种牙齿矫正的动画合成方法、装置、设备及存储介质，先通过获取不同阶段的多张口内照，并对多张口内照进行标号后依次输入进训练好的口内照定位网络中，以生成多张剪切图，接着，将多张所述剪切图送入关键点检测网络中，以生成多张所述剪切图中两个的关键点的坐标、以及两个关键点之间的距离；再接着，根据矫正前的口内照剪切图和两个关键点之间的距离对矫正过程中的多张口内照进行平移和裁剪，以生成多张尺寸相同的口内照；最后，将多张所述尺寸相同的口内照根据所述标号进行合成，以生成牙齿矫正过程的视频，解决了现有牙齿矫正视频存在缺乏连贯性的问题。

技术领域

本发明涉及机器视觉领域，特别涉及一种牙齿矫正的动画合成方法、装置、设备及存储介质。

背景技术

口内照是牙科领域重要的数据类型，医生通过观察口内照来判断患者的牙齿变化情况，患者通过口内照来了解目前治疗的效果。当一个矫治流程结束后，患者往往想要知道自己的牙齿形态发生了怎样的变化。视频这一数据格式可以很好的反映患者的牙齿随时间的位置变换，使患者能够直观的感受到治疗的效果。

将多张口内照合成视频的技术难点主要在于，患者用拍摄仪器拍摄口内照的间隔时间很长，导致每次拍摄口内照的相机位置不固定，图片大小也不固定，如果强行把不同位置不同尺寸的口内照合并成视频，会使生成的视频缺乏连贯性，无法使患者得到清晰的牙齿变化情况

有鉴于此，提出本申请。

发明内容

本发明公开了一种牙齿矫正的动画合成方法、装置、设备及存储介质，旨在解决现有牙齿矫正视频存在缺乏连贯性的问题。

本发明第一实施例提供了一种牙齿矫正的动画合成方法，包括：

获取不同阶段的多张口内照，并对多张口内照进行标号后依次输入进训练好的口内照定位网络中，以生成多张剪切图；

将多张所述剪切图送入关键点检测网络中，以生成多张所述剪切图中两个的关键点的坐标、以及两个关键点之间的距离；

根据矫正前的口内照剪切图和两个关键点之间的距离对矫正过程中的多张口内照进行平移和裁剪，以生成多张尺寸相同的口内照；

将多张所述尺寸相同的口内照根据所述标号进行合成，以生成牙齿矫正过程的视频。

优选地，所述口内照定位网络的训练过程为：

S201,向所述口内照定位网络输入一张口内照，以生成剪切图预测坐标形成的第一矩阵、以及框的置信度；

S202,获取所述口内照实际标注坐标形成的第二矩阵，并根据所述第一矩阵和所述第二矩阵生成交并比；

S203,将所述交并比和所述框的置信度作为所述口内照定位网络的损失函数，以更新所述内照定位网络的参数；

重复步骤S201至S203，直至迭代预设次数。

优选地，所述关键点检测网络的训练过程为：

S301，向所述关键点检测网络输入一张经过所述口内照定位网络裁剪过后的口内照，以预测生成两个关键点的位置坐标、以及两个关键点之间的第一距离；

S302，获取在所述裁剪过后的口内照上实际标注的两个关键点的位置坐标，以及实际标注的两个关键点之间的第二距离，并生成所述第一距离和所述第二距离之间的差值；

S303，将所述差值作为所述关键点检测网络的损失函数，以更新所述关键点检测网络的参数；

重复步骤S301至S303，直至迭代预设次数。

优选地，所述根据矫正前的口内照剪切图和两个关键点之间的距离对矫正过程中的多张口内照进行平移和裁剪，以生成多张尺寸相同的口内照，具体为：

将所述矫正前的口内照剪切图的两个关键点之间的距离作为缩放因子，对剩余的剪切图进行缩放；