[发明专利]行为语义细分化理解方法、系统、计算机装置以及介质在审
申请号: | 201910640299.X | 申请日: | 2019-07-16 |
公开(公告)号: | CN110580446A | 公开(公告)日: | 2019-12-17 |
发明(设计)人: | 谈加杰;李柠 | 申请(专利权)人: | 上海交通大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
代理公司: | 31219 上海光华专利事务所(普通合伙) | 代理人: | 高彦 |
地址: | 200240 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种行为语义细分化理解方法、系统、计算机装置以及介质,包括:将图像信息通过卷积神经网络模型得到关键点热力图和关键点亲和域图;根据所述关键点热力图经过非最大抑制优化算法得到关键点坐标,由所述关键点坐标组成二分图;将所述二分图与所述关键点亲和域图得到带权二分图;利用匹配算法进行匹配得到包含所述关键点的位置的关键点连接方式信息;根据所述关键点连接方式信息得到个体活动区域;所述个体活动区域作为参数输入所述卷积网络模型得到对应动作分类。解决了场景中人类多并分别表达的行为语义不一致时,无法分析出场景中个体表达的行为语义的问题,将复杂场景下人体动作语义理解转化为回归与分类问题,降低了问题的复杂度。 | ||
搜索关键词: | 关键点 语义 二分图 连接方式信息 活动区域 卷积神经网络 计算机装置 场景 参数输入 动作分类 分类问题 复杂场景 匹配算法 人体动作 图像信息 网络模型 优化算法 语义理解 不一致 复杂度 卷积 匹配 回归 转化 分析 | ||
【主权项】:
1.一种行为语义细分化理解方法,其特征在于,包括:/n将图像信息通过卷积神经网络模型根据标记坐标数据转换得到关键点热力图和关键点亲和域图;/n根据所述关键点热力图经过非最大抑制优化算法得到关键点坐标,由所述关键点坐标对应的关键点组成二分图;/n将所述二分图与所述关键点亲和域图经过线积分得到带权二分图;/n将所述带权二分图利用匹配算法进行匹配得到包含所述关键点的位置的关键点连接方式信息;/n根据所述关键点连接方式信息得到个体活动区域;/n将所述个体活动区域作为参数输入所述卷积网络模型得到对应动作分类。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海交通大学,未经上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910640299.X/,转载请声明来源钻瓜专利网。