[发明专利]一种基于多模态识别的人力资源用面试系统

说明书

本发明公开了一种基于多模态识别的人力资源用面试系统，包括服务器、嵌入式系统和边缘计算设备，所述服务器包括登陆信息确认模块、信息分析模块、信息发送模块和信息储存模块，所述移动端用于为求职者、企业用户等构架沟通平台。本发明通过边缘计算设备搭载嵌入式系统，硬件与软件结合应用于一对一对话、问答等场景，使得企业在对求职者进行面试时，能够采集求职者的面部表情及热感分布，并通过问答方式采集求职者语音，用微表情、脉搏波及声音来建立模型分析，对求职者的真实度、诚信度、实时状态以及性格色彩等进行判断，便于企业根据数据分析选择合适的人才，适合广泛推广与使用。

技术领域

本发明涉及人力资源领域，具体为一种基于多模态识别的人力资源用面试系统。

背景技术

面试是求职者在找工作过程中不可或缺的一个环节，面试给企业和求职者双向交流的机会，是企业和求职者之间相互了解的重要途径，而在企业招聘过程中，企业人事从大量求职者信息中筛选合适的人才，并通过与求职者面谈、求职者填写的资料等了解求职者信息，需要企业人事人工对求职者信息进行筛选、数据分析，工作量较大，容易出现疏漏，求职者也需要从大量企业中找到适合自己的岗位，较为不便。因此，我们提出一种基于多模态识别的人力资源用面试系统。

发明内容

本发明的目的在于提供一种基于多模态识别的人力资源用面试系统，解决了背景技术中所提出的问题。

为实现上述目的，本发明提供如下技术方案：一种基于多模态识别的人力资源用面试系统，包括服务器、嵌入式系统和边缘计算设备，所述服务器包括登陆信息确认模块、信息分析模块、信息发送模块和信息储存模块，所述移动端用于为求职者、企业用户等构架沟通平台，所述嵌入式系统包括企业信息模块、企业管理模块、问答模块和数据分析模块，所述嵌入式系统为企业管理系统，所述边缘计算设备为搭载嵌入式系统的多模态设备。

作为本发明的一种优选实施方式，所述服务器包括移动端和web端，所述登陆信息确认模块用于用户进行注册登陆、填写并完善用户资料，然后企业数据合并形成公司列表，求职者填写调查问卷。

作为本发明的一种优选实施方式，所述信息分析模块，针对求职者所填写的问卷，进行初步评估，并形成分析结果，所述信息发送模块，根据分析结果向求职者发送面试邀约通知，提供猎头服务，所述信息储存模块，针对用户信息形成个人中心，并将数据上传云端。

作为本发明的一种优选实施方式，所述企业信息模块用于企业账号登录，所述企业管理模块包括公司信息管理、人才库管理和人力资源内容管理，所述问答模块为多模态设备问答系统，包括微表情识别、脉搏波提取和语音识别，所述数据分析模块将问答模块识别的数据形成数据分析报告。

作为本发明的一种优选实施方式，所述边缘计算设备包括设备主体、红外摄像头和降噪拾音器。

作为本发明的一种优选实施方式，所述边缘计算设备通过红外摄像头采集求职者的面部表情及热感分布，所述微表情识别对求职者面部表情进行识别并分类，输出高兴、伤心、害怕、愤怒、厌恶、惊讶和轻蔑七种基本表情识别，所述脉搏波提取从热感分布中提取脉搏波，根据脉搏波数据输出紧张、正常两种结果。

作为本发明的一种优选实施方式，所述边缘计算设备通过降噪拾音器拾取求职者声音，所述语音识别识别求职者回答，并根据声调、响度等判断求职者心理状态，输出求职者答卷和紧张、正常两种结果。

与现有技术相比，本发明的有益效果如下：

1.本发明的基于多模态识别的人力资源用面试系统，通过边缘计算设备搭载嵌入式系统，硬件与软件结合应用于一对一对话、问答等场景，使得企业在对求职者进行面试时，能够采集求职者的面部表情及热感分布，并通过问答方式采集求职者语音，用微表情、脉搏波及声音来建立模型分析，对求职者的真实度、诚信度、实时状态以及性格色彩等进行判断，便于企业根据数据分析选择合适的人才。