[发明专利]关键点的抖动处理方法和装置

说明书

本发明涉及一种关键点的抖动处理方法和装置。该方法包括：检测视频流内当前帧图像的多个第一关键点，得到所述多个第一关键点的检测位置坐标；获取所述视频流中上一帧图像对应的第一形状拓扑结构信息，以及获取所述当前帧图像的多个第一关键点中能够连接成边的关键点的标识信息；根据所述多个第一关键点的检测位置坐标、所述第一形状拓扑结构信息以及所述标识信息，确定所述多个第一关键点的目标位置坐标，并将所述多个第一关键点移动至所述目标位置坐标。该方法可以解决视频流中关键点的抖动问题，同时能够提高视频流中关键点的定位精度，且在视频流中待检测物体移动时，减小了关键点的视觉延迟感。

技术领域

本发明涉及计算机视觉领域，特别是涉及一种关键点的抖动处理方法和装置。

背景技术

随着科技的不断发展，物体关键点检测技术的应用越来越广泛，例如，现阶段比较流行的基于人脸关键点检测技术的表情贴纸。目前，在同一视频流中，基于该技术，终端设备在视频流的前后帧内检测出的关键点的位置会有差别，这样，在视频流中便会出现检测出的所有关键点随机抖动的现象，从而导致基于物体关键点检测技术的应用产品无法正常使用。因此，如何解决视频流中关键点的抖动是本领域技术人员亟待解决的问题。

在传统技术中，针对视频流的当前帧内的每一个关键点，终端设备首先检测当前帧内关键点的检测位置，然后根据上一帧内关键点的位置和检测的当前帧内关键点的检测位置，重新确定当前帧内关键点的位置，以减小当前帧内关键点的位置与上一帧内关键点的位置之间的距离，从而减缓视频流中关键点的抖动。

但是，采用上述传统技术，会导致关键点的位置精度较低，且会出现当物体移动时，关键点延迟移动的问题。

发明内容

基于此，有必要针对传统技术中关键点的位置精度较低，且当物体移动时，关键点延迟移动的问题，提供一种关键点的抖动处理方法和装置。

第一方面，本发明提供一种关键点的抖动处理方法，包括：

检测视频流内当前帧图像的多个第一关键点，得到所述多个第一关键点的检测位置坐标；

获取所述视频流中上一帧图像对应的第一形状拓扑结构信息，以及获取所述当前帧图像的多个第一关键点中能够连接成边的关键点的标识信息；

根据所述多个第一关键点的检测位置坐标、所述第一形状拓扑结构信息以及所述标识信息，确定所述多个第一关键点的目标位置坐标，并将所述多个第一关键点移动至所述目标位置坐标。

本实施例提供的关键点的抖动处理方法，终端设备通过检测得到视频流内当前帧图像的多个第一关键点的检测位置坐标，并获取视频流中上一帧图像对应的第一形状拓扑结构信息，以及获取当前帧图像的多个第一关键点中能够连接成边的关键点的标识信息，然后结合多个第一关键点的检测位置坐标、第一形状拓扑结构信息以及多个第一关键点中能够连接成边的关键点的标识信息，确定多个第一关键点的目标位置坐标，并将多个第一关键点移动至目标位置坐标。由于终端设备在确定当前帧图像的多个第一关键点的目标位置坐标时，是通过将上一帧图像对应的第一形状拓扑结构信息、当前帧图像对应的第一拓扑要求信息以及多个第一关键点的检测位置坐标作为约束条件，所约束出的当前帧图像对应的拓扑结构信息和上一帧图像对应的拓扑结构信息之间的差距较小，从而使得确定出的当前帧图像的多个第一关键点的目标位置坐标与上一帧图像的多个第二关键点的位置坐标差距较小，进而解决了视频流中关键点的抖动问题。同时，由于终端设备在确定当前帧图像的多个第一关键点的目标位置坐标时，还结合了多个第一关键点的检测位置坐标，使得确定出的多个第一关键点的目标位置坐标与多个第一关键点的检测位置坐标差距较小，从而提高了视频流中关键点的定位精度，且在视频流中待检测物体移动时，减小了关键点的视觉延迟感。

在其中一个实施例中，所述第一形状拓扑结构信息包括所述上一帧图像中多个第二关键点的坐标以及所述多个第二关键点构成的边。