[发明专利]一种动态演化表情的识别方法与系统在审
申请号: | 202010940835.0 | 申请日: | 2020-09-09 |
公开(公告)号: | CN112084944A | 公开(公告)日: | 2020-12-15 |
发明(设计)人: | 赵曦滨;朱俊杰;骆炳君;高跃 | 申请(专利权)人: | 清华大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 北京律谱知识产权代理事务所(普通合伙) 11457 | 代理人: | 黄云铎;孙红颖 |
地址: | 100084*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 动态 演化 表情 识别 方法 系统 | ||
本发明提供了一种动态演化表情的识别方法,其中,该自适应识别方法包括:步骤1,根据表情类别的动态增加,构建并优化过往表情记忆模块;步骤2,根据新类别的表情数据,利用过往表情记忆模块最小化“紧凑分类‑蒸馏”损失函数,动态升级表情识别系统;步骤3,根据输入需要识别的表情图片和当前状态下的表情识别系统,输出图片的表情种类标签。本发明给予面部表情识别系统可以支持类别动态增加的任何一个阶段的训练和识别,而且达到稳定可靠的性能。与传统面部表情识别系统相比,该系统显著降低在训练时的内存和时间损耗。
技术领域
本申请涉及的技术领域,具体而言,涉及一种动态演化表情的识别方法以及一种动态演化表情的识别系统。
背景技术
表情识别技术在人机交互、工业控制、医疗教育等领域取得了广泛的应用,是分析用户行为、评估心理状态、监控病情发展等任务的重要工具。随着心理学对于情绪分析的不断细化,越来越多的复杂表情类别开始被公众所创造、关注和使用。在这种情况下,动态演化表情的识别方法成为了表情识别技术中一项紧急和基础的挑战。
而现有技术中,采用类型固定的表情识别方法,在引入新表情类别的数据时,需要废弃原有的表情识别模型,再使用包括原有表情类别和新表情类别在内的所有数据重新训练新的表情识别模型,导致在实际应用过程中内存和时间损耗过高,限制了表情识别技术在复杂表情类别中的应用。而导致这一问题的根源在于,在训练面向类别动态增加的表情识别模型时,难以保留模型对原有表情类别的知识记忆,存在原有表情类别的识别准确率大幅降低的可能性,使得表情识别技术无法泛化到表情类别动态增加的应用场景。
发明内容
本申请的目的在于:增强了面向类别动态增加的表情识别模型的记忆能力,提升了原有表情类型的识别准确率,减少了面向类别动态增加的表情识别方法的内存和时间损耗,进而,提高了面向类别动态增加的表情识别技术的可行性。
本申请第一方面的技术方案是提供一种动态演化表情的识别方法,其特征在于,所述自适应识别方法包括:
步骤1、根据表情类别的动态增加,构建并优化过往表情记忆模块;
步骤2、根据新类别的表情数据,利用过往表情记忆模块最小化“紧凑分类-蒸馏”损失函数,动态升级表情识别系统;
步骤3、根据输入需要识别的表情图片和当前状态下的表情识别系统,输出图片的表情种类标签。
进一步地,所述步骤1中,具体包括:
步骤11、根据计算设备的内存限制以及数据获取权限完整程度,设置过往表情记忆模块的存储代表性表情图片的总规模K;
步骤12、在系统初始化阶段后,根据初始化中的s0类表情数据,为过往表情记忆模块设置可以存储K张图片的内存;
步骤13、对于s0类表情数据中的每一类表情中的每一张图片,通过神经网络的特征提取模块提取特征向量;
步骤14、将每一类表情的图片的特征向量求算术平均值特征向量c;
步骤15、根据算术平均值向量依次生成K/s0张图片,并构成一个有序序列;对于第k张图片,从k=1到K/s0,可依照计算公式如下:
其中x为表情图片,f()为网络模型的特征提取模块,pj为有序图片序列中已生成的图片,c是第k张图片对应表情类型的算术平均值特征向量;
步骤16、根据每一类表情的图片数据生成的有序图片序列,共同构建初始化的过往表情记忆模块;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010940835.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:抽屉、仓储系统以及仓储调度方法
- 下一篇:信息识别方法及设备