[发明专利]视频流处理方法、视频流显示方法、装置及设备

权利要求书

1.一种视频流处理方法，其特征在于，所述方法包括：

获取主播帐号的第一视频流中的第一视频帧；

识别所述第一视频帧中的不整齐牙齿，所述不整齐牙齿包括多颗牙齿中的至少一颗牙齿；

响应于所述第一视频帧中包括所述不整齐牙齿，校正所述第一视频帧中的所述不整齐牙齿得到第二视频帧，所述第二视频帧中包括对所述不整齐牙齿进行矫正得到的目标整齐牙齿。

2.根据权利要求1所述的方法，其特征在于，所述识别所述第一视频帧中的不整齐牙齿，包括：

调用机器学习模型，识别所述第一视频帧中的不整齐牙齿，所述机器学习模型是通过不整齐牙齿样本集训练得到的。

3.根据权利要求2所述的方法，其特征在于，所述机器学习模型包括图像分割模型以及图像分类模型；

所述调用机器学习模型，识别所述第一视频帧中的不整齐牙齿，包括：

根据所述图像分割模型，分割出所述第一视频帧中单颗牙齿对应的牙齿图像区域，所述牙齿包括整齐牙齿以及所述不整齐牙齿；

根据所述图像分类模型，识别所述牙齿图像区域中的所述不整齐牙齿。

4.根据权利要求1所述的方法，其特征在于，所述响应于所述第一视频帧中包括所述不整齐牙齿，校正所述第一视频帧中的所述不整齐牙齿得到第二视频帧，包括：

确定每颗所述不整齐牙齿的第一两侧顶点以及每颗整齐牙齿的第二两侧顶点；

根据所述第一两侧顶点以及所述第二两侧顶点，通过多项式拟合方法确定校正曲线；

根据所述校正曲线，校正所述第一视频帧中的所述不整齐牙齿。

5.根据权利要求4所述的方法，其特征在于，所述根据所述第一两侧顶点以及所述第二两侧顶点，通过多项式拟合方法确定校正曲线，包括：

根据所述第一两侧顶点以及所述第二两侧顶点建立坐标系；

确定所述第一两侧顶点以及所述第二两侧顶点在所述坐标系中的坐标；

根据所述第一两侧顶点的所述坐标以及所述第二两侧顶点的所述坐标，通过多项式拟合方法确定校正函数，所述校正函数的函数图像为所述校正曲线。

6.根据权利要求4所述的方法，其特征在于，所述根据所述校正曲线，校正所述第一视频帧中的所述不整齐牙齿，包括：

在所述第一视频帧中确定所述第一两侧顶点对应的目标校正点，所述目标校正点在所述校正曲线上；

根据所述目标校正点，通过移动最小二乘法对所述不整齐牙齿对应的牙齿图像区域进行图像变形，得到所述目标整齐牙齿，所述目标整齐牙齿的第三两侧顶点为所述目标校正点。

7.根据权利要求1至6任一所述的方法，其特征在于，在所述响应于所述第一视频帧中包括所述不整齐牙齿，校正所述第一视频帧中的所述不整齐牙齿得到第二视频帧之后，所述方法还包括：

使用所述第二视频帧替换所述第一视频流中的所述第一视频帧，得到第二视频流；

向观众客户端发送所述第二视频流。

8.一种视频流显示方法，其特征在于，所述方法包括：

根据主播帐号的第一视频流中的第一视频帧，在用户界面中显示第一视频画面，所述第一视频画面中显示有不整齐牙齿；

响应于接收到牙齿美化操作，获取第二视频流，所述第二视频流中的第二视频帧是通过矫正所述第一视频帧中的所述不整齐牙齿得到的；

根据所述第二视频帧在用户界面中显示第二视频画面，所述第二视频画面中显示的牙齿为整齐牙齿。

9.一种视频流处理装置，其特征在于，所述装置包括：

获取模块，用于获取主播帐号的第一视频流中的第一视频帧；

识别模块，用于识别所述第一视频帧中的不整齐牙齿，所述不整齐牙齿包括多颗牙齿中的至少一颗牙齿；

矫正模块，用于响应于所述第一视频帧中包括所述不整齐牙齿，校正所述第一视频帧中的所述不整齐牙齿得到第二视频帧，所述第二视频帧中包括对所述不整齐牙齿进行矫正得到的目标整齐牙齿。