[发明专利]面部红外热图的灌注优化及人工智能情绪监测方法有效

专利信息
申请号: 201910823131.2 申请日: 2019-09-02
公开(公告)号: CN110751015B 公开(公告)日: 2023-04-11
发明(设计)人: 丁帅;李莹辉;李霄剑;杨成佳;杨善林;吴传亮;俞尧;周万隆 申请(专利权)人: 合肥工业大学;中国航天员科研训练中心
主分类号: G06V40/16 分类号: G06V40/16;G06V10/764;G06V10/82;G06N3/0464;G06N3/0442;G06N3/08
代理公司: 北京久诚知识产权代理事务所(特殊普通合伙) 11542 代理人: 余罡
地址: 230009 安*** 国省代码: 安徽;34
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 面部 红外 灌注 优化 人工智能 情绪 监测 方法
【权利要求书】:

1.一种面部红外热图的灌注优化及人工智能情绪监测方法,其特征在于,包括:

获取目标个体的面部红外视频;所述面部红外视频包括多帧面部红外视频图像;

针对每帧面部红外视频图像,获取该帧面部红外视频图像中额头部位的多个特征点的温度信息,基于所述多个特征点的温度信息,确定该帧面部红外视频图像对应的额头平均温度信息,并基于该帧面部红外视频图像对应的额头平均温度信息,确定该帧面部红外视频图像对应的血液灌注值,基于确定的所述血液灌注值,确定该帧面部红外视频图像对应的血液灌注伪彩色图;

利用CNN-BiGRU_Attention网络模型对每帧面部红外视频图像对应的血液灌注伪彩色图进行处理,分别得到每帧面部红外视频图像对应的空间特征向量矩阵;

针对每帧面部红外视频图像,将该帧面部红外视频图像对应的血液灌注伪彩色图对应的数据进行数据清洗,并将清洗后的数据转化BiGRU层能够处理的矩阵向量;对转化得到的矩阵向量进行语义编码,并基于语义编码得到的数据,确定该帧面部红外视频图像对应的权重系数,并利用BiGRU层,基于确定权重系数,确定该帧面部红外视频图像对应的时间特征向量矩阵;

将每帧面部红外视频图像对应的时间特征向量矩阵,和每帧面部红外视频图像对应的空间特征向量矩阵,利用全连接层进行拼接,并利用softmax函数对拼接得到的数据进行处理,确定目标个体针对每种预设情绪的概率特征信息;

将所述概率特征信息发送给客户端和显示端进行显示;

所述基于该帧面部红外视频图像对应的额头平均温度信息,确定该帧面部红外视频图像对应的血液灌注值,包括:

利用如下公式计算该帧面部红外视频图像对应的血液灌注值:

PI=0.073*e0.3846T/856

式中,PI表示该帧面部红外视频图像对应的血液灌注值,T表示该帧面部红外视频图像对应的额头平均温度信息;

利用上述公式计算得到的血液灌注值具有r2=0.986的高置信度;

所述对转化得到的矩阵向量进行语义编码,包括:

利用如下公式对化得到的矩阵向量进行语义编码:

hij=BiGRU(cij)

式中,hij表示语义编码得到的数据,cij表示转化得到的矩阵向量;

所述基于语义编码得到的数据,确定该帧面部红外视频图像对应的权重系数,包括:

利用如下公式计算该帧面部红外视频图像对应的权重系数:

表示随机初始化的注意力矩阵,Attention机制矩阵sij由attention机制分配的不同概率权重与各个隐层状态的乘积的累加和,使用softmax函数做归一化操作得到。

2.根据权利要求1所述的方法,其特征在于,所述基于确定的所述血液灌注值,确定该帧面部红外视频图像对应的血液灌注伪彩色图,包括:

利用python中的opencv模块对所述血液灌注值进行处理,得到该帧面部红外视频图像对应的血液灌注伪彩色图。

3.根据权利要求1所述的方法,其特征在于,所述CNN-BiGRU_Attention网络模型包括3个卷积层,2个池化层和1个全连接层。卷积层设置了1个5*5和2个3*3的规格,2个池化层分别设置为Maxpooling和Global Average Pooling。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于合肥工业大学;中国航天员科研训练中心,未经合肥工业大学;中国航天员科研训练中心许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910823131.2/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top