[发明专利]一种基于静态图像的行为识别方法有效
申请号: | 202011200755.8 | 申请日: | 2020-11-02 |
公开(公告)号: | CN112016540B | 公开(公告)日: | 2021-01-12 |
发明(设计)人: | 谢毓湘;宫铨志;张家辉;栾悉道;闫洁;魏迎梅;康来;蒋杰;白亮 | 申请(专利权)人: | 中国人民解放军国防科技大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
代理公司: | 长沙国科天河知识产权代理有限公司 43225 | 代理人: | 周达 |
地址: | 410073 湖*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 静态 图像 行为 识别 方法 | ||
1.一种基于静态图像的行为识别方法,其特征在于,包括如下步骤:
步骤1,获取待识别图像,并对待识别图像中的目标信息进行标注,得到第一标注信息;
步骤2,将待识别图像与第一标注信息输入至行为识别模型,其中,所述识别模型包括CBOW模型与DenseNet模型;
步骤3,基于CBOW模型对第一标注信息进行识别,得到第一标注信息中目标信息所对应行为信息的第一行为预测概率分布;
步骤4,基于DenseNet模型对待识别图像进行识别,得到待识别图像中目标信息所对应行为信息的第二行为预测概率分布,其中,所述DenseNet模型的训练过程是基于训练后的CBOW模型进行的;
步骤5,将第一行为预测概率分布与第二行为预测概率分布中相同的行为信息对应的概率值进行加权,得到最终行为预测概率分布,选取最终行为预测概率分布中最大概率值所对应的行为信息作为识别结果并输出。
2.根据权利要求1所述基于静态图像的行为识别方法,其特征在于,步骤3中,所述基于CBOW模型对第一标注信息进行识别,具体包括:
步骤3.1,构建第一训练样本库,所述第一训练样本库包括若干第二标注信息,其中,所述第二标注信息包括目标信息以及与目标信息对应的行为信息;
步骤3.2,基于第一训练样本库对CBOW模型进行训练,得到训练后的CBOW模型;
步骤3.3,基于训练后的CBOW模型对第一标注信息进行识别,得到第一标注信息中目标信息所对应行为信息的第一行为预测概率分布。
3.根据权利要求2所述基于静态图像的行为识别方法,其特征在于,步骤3.2中,所述基于第一训练样本库对CBOW模型进行训练,得到训练后的CBOW模型,具体包括:
步骤3.2.1,选取第二标注信息;
步骤3.2.2,将选取的第二标注信息输入至CBOW模型,并将第二标注信息对应的目标信息与行为信息转换成one-hot词向量;
步骤3.2.3,将步骤3.2.2中目标信息转化的得到的one-hot词向量乘以CBOW模型的第一权重矩阵,作为目标信息在CBOW模型下的词向量格式;
步骤3.2.4,将步骤3.2.3中乘积所得的结果相加,进行平均操作,再将平均后结果乘以CBOW模型的第二个权重矩阵,得到第一结果词向量;
步骤3.2.5,对第一结果词向量进行softmax激活函数处理,得到格式与one-hot向量相同的第一输出词向量,并基于第一输出词向量与步骤3.2.2中行为信息转化的得到的one-hot词向量进行损失计算,得到第一损失结果;
步骤3.2.6,判断第一损失结果是否小于第一设定阈值,若是则完成CBOW模型的训练,否则在调整第一权重矩阵与第二权重矩阵后选取新的第二标注信息后重复步骤3.2.2-3.2.6。
4.根据权利要求3所述基于静态图像的行为识别方法,其特征在于,步骤3.2.6中,采用随机梯度下降算法调整第一权重矩阵与第二权重矩阵。
5.根据权利要求2或3或4所述基于静态图像的行为识别方法,其特征在于,步骤3.3中,所述基于训练后的CBOW模型对第一标注信息进行识别,具体为:
步骤3.3.1,将第一标注信息输入至训练后的CBOW模型,并将第一标注信息对应的目标信息转换成one-hot词向量;
步骤3.3.2,将步骤3.3.1中目标信息转化的得到的one-hot词向量乘以CBOW模型的第一权重矩阵,作为目标信息在CBOW模型下的词向量格式;
步骤3.3.3,将步骤3.3.2中乘积所得的结果相加,进行平均操作,再将平均后结果乘以CBOW模型的第二个权重矩阵,得到第二结果词向量;
步骤3.3.4,对第二结果词向量进行softmax激活函数处理,得到格式与one-hot向量相同的第二输出词向量,即得到第一标注信息中目标信息所对应行为信息的第一行为预测概率分布。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民解放军国防科技大学,未经中国人民解放军国防科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011200755.8/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序