[发明专利]动作的纠正方法、装置、电子设备及存储介质在审
申请号: | 202011359798.0 | 申请日: | 2020-11-27 |
公开(公告)号: | CN112364818A | 公开(公告)日: | 2021-02-12 |
发明(设计)人: | 杨昊;刘飞 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/46;G06K9/62 |
代理公司: | 深圳市智圈知识产权代理事务所(普通合伙) 44351 | 代理人: | 吕静 |
地址: | 523860 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 纠正 方法 装置 电子设备 存储 介质 | ||
1.一种动作的纠正方法,其特征在于,应用于服务器,所述服务器分别与第一用户设备和第二用户设备连接,所述第一用户设备设置有第一WebRTC客户端,所述第二用户设备设置有第二WebRTC客户端,所述方法包括:
接收所述第一用户设备通过所述第一WebRTC客户端发送的第一用户的第一视频信息,并接收所述第二用户设备通过所述第二WebRTC客户端发送的第二用户的第二视频信息;
根据所述第一视频信息获取所述第一用户的第一动作信息,并根据所述第二视频信息获取所述第二用户的第二动作信息;
当所述第一动作信息与所述第二动作信息不匹配时,根据所述第一动作信息生成针对所述第二动作信息的纠正信息;
将所述纠正信息发送至所述第二WebRTC客户端,以通过所述第二WebRTC客户端显示所述纠正信息。
2.根据权利要求1所述的方法,其特征在于,所述将所述纠正信息发送至所述第二WebRTC客户端,以通过所述第二WebRTC客户端显示所述纠正信息,包括:
将所述第一视频信息、所述第二视频信息和所述纠正信息进行合流,生成纠正视频;
将所述纠正视频发送至所述第二WebRTC客户端,以通过所述第二WebRTC客户端播放所述纠正视频。
3.根据权利要求1所述的方法,其特征在于,所述第一动作信息包括第一关节夹角,所述第二动作信息包括第二关节夹角,所述根据所述第一视频信息获取所述第一用户的第一动作信息,并根据所述第二视频信息获取所述第二用户的第二动作信息,包括:
根据所述第一视频信息得到所述第一用户的骨骼关节模型,并根据所述第二视频信息得到所述第二用户的骨骼关节模型;
根据所述第一用户的骨骼关节模型,确定所述第一关节夹角,并根据所述第二用户的骨骼关节模型,确定所述第二关节夹角。
4.根据权利要求3所述的方法,其特征在于,所述根据所述第一视频信息得到所述第一用户的骨骼关节模型,包括:
确定所述第一视频信息中的一帧第一视频图像,作为第一目标图像;
在所述第一目标图像中,确定所述第一用户对应的用户图像,作为第一用户图像;
在所述第一用户图像中确定多个第一关节点;
获取所述多个第一关节点在所述第一用户图像中的多个第一关节位置,其中,所述多个第一关节点与所述多个第一关节位置一一对应;
基于所述多个第一关节位置,将所述多个第一关节位置映射到三维空间中,获得所述第一用户的骨骼关节模型。
5.根据所述权利要求4所述的方法,其特征在于,所述第一关节点包括第一目标关节点、第二目标关节点和第三目标关节点,所述根据所述第一用户的骨骼关节模型,确定所述第一关节夹角,包括:
在所述第一用户的骨骼关节模型中获取所述第一目标关节点对应的三维空间坐标、所述第二目标关节点对应的三维空间坐标和所述第三目标关节点对应的三维空间坐标;
计算第一目标关节点对应的三维空间坐标和所述第二目标关节点对应的三维空间坐标之间的第一向量;
计算所述第二目标关节点对应的三维空间坐标和所述第三目标关节点对应的三维空间坐标之间的第二向量;
计算所述第一向量与所述第二向量之间的夹角,获得所述第一关节夹角。
6.根据权利要求4所述的方法,其特征在于,所述确定所述第一视频信息中的一帧第一视频图像,作为第一目标图像,包括:
获取所述第一视频信息中的多帧第一视频图像的多个第一颜色直方图,其中,所述多帧第一视频图像与所述多个第一颜色直方图一一对应;
对所述多个第一颜色直方图进行特征提取,获得所述多帧第一视频图像对应的多个第一特征向量;
将所述多个第一特征向量分为多个聚类,在所述多个聚类中确定多个第一目标聚类中心,并确定所述多个第一目标聚类中心对应的多帧第一视频图像作为多帧第一关键图像;
在所述多帧第一关键图像中确定一帧第一关键图像,作为所述第一目标图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011359798.0/1.html,转载请声明来源钻瓜专利网。