[发明专利]一种社交关系识别方法、装置、电子设备及存储介质在审
申请号: | 202011617638.1 | 申请日: | 2020-12-30 |
公开(公告)号: | CN112633224A | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 余意;邢玲 | 申请(专利权)人: | 深圳云天励飞技术股份有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/32;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 深圳驿航知识产权代理事务所(普通合伙) 44605 | 代理人: | 杨伦 |
地址: | 518000 广东省深圳市龙岗区园山*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 社交 关系 识别 方法 装置 电子设备 存储 介质 | ||
1.一种社交关系识别方法,其特征在于,包括以下步骤:
获取待识别图像,所述待识别图像包括第一目标人员与第二目标人员;
对所述待识别图像进行关键点信息提取,提取所述第一目标人员的第一人体关键点信息,提取所述第二目标人员的第二人体关键点信息,所述第一人体关键点信息与所述第二人体关键点信息为人体关节关键点信息;
根据所述第一人体关键点信息与所述第二人体关键点信息,分别构建所述第一目标人员与所述第二目标人员之间的关键点图数据和骨架图数据;
通过预设的第一图卷积模型,提取所述关键点图数据的关键点交互特征,以及通过预设的第二图卷积模型,提取所述骨架图数据的骨架交互特征;
将所述关键点交互特征与所述骨架交互特征进行融合并分类,得到所述第一目标人员与所述第二目标人员的社交关系。
2.如权利要求1所述的一种社交关系识别方法,其特征在于,所述根据所述第一人体关键点信息与所述第二人体关键点信息,构建所述第一目标人员与所述第二目标人员之间的关键点图数据,包括:
计算第一人体关键点信息与第二人体关键点信息的特征矩阵,将所述特征矩阵作为所述第一目标人员与所述第二目标人员之间的所述关键点图数据。
3.如权利要求2所述的一种社交关系识别方法,其特征在于,所述根据所述第一人体关键点信息与所述第二人体关键点信息,构建所述第一目标人员与所述第二目标人员之间的骨架图数据,包括:
根据所述第一人体关键点信息与所述第二人体关键点信息,确定所述第一目标人员的骨架以及所述第二目标人员的骨架;
将所述第一目标人员的骨架两端的中心点作为第一骨架点,得到所述第一目标人员的第一骨架点信息,以及将所述第二目标人员的骨架两端的中心点作为第二骨架点,得到所述第二目标人员的第二骨架点信息;
计算所述第一人体骨架点信息与所述第二人体骨架点信息的特征矩阵,将所述特征矩阵作为所述第一目标人员与所述第二目标人员之间的所述骨架图数据。
4.如权利要求3所述的一种社交关系识别方法,其特征在于,预设的所述第一图卷积模型与所述第二图卷积模型基于自适应图卷积网络构建得到,所述自适应图卷积网络包括全局邻接矩阵、个体邻接矩阵以及参数矩阵。
5.如权利要求4所述的一种社交关系识别方法,其特征在于,所述参数矩阵包括第一参数矩阵与第二参数矩阵,所述通过预设的第一图卷积模型,提取所述关键点图数据的关键点交互特征,以及通过预设的第二图卷积模型,提取所述骨架图数据的骨架交互特征,包括:
对所述关键点图数据进行卷积操作,使得所述关键点图数据中的多个关键点的特征映射到同一个第一特征空间;
在所述第一特征空间中,遍历计算任意两个关键点的相似度,并对计算得到的所有关键点的相似度进行归一化后得到第一个体邻接矩阵;
根据所述关键点图数据、第一全局邻接矩阵、所述第一个体邻接矩阵以及所述第一参数矩阵,计算得到所述关键点图数据的关键点交互特征;
所述通过预设的第二图卷积模型,提取所述骨架图数据的骨架交互特征,包括:
对所述骨架图数据进行卷积操作,使得不同骨架点的特征映射到同一个第二特征空间;
在所述第二特征空间中,遍历计算任意两个骨架点的相似度,对计算得到的所有骨架点的相似度进行归一化后得到第二个体邻接矩阵;
根据所述骨架图数据、第二全局邻接矩阵、所述第二个体邻接矩阵以及所述第二参数矩阵,计算得到所述骨架图数据的骨架交互特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳云天励飞技术股份有限公司,未经深圳云天励飞技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011617638.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种家用电梯钢丝绳通断验证装置
- 下一篇:一种模具加工的磨削用方形工件夹具