[发明专利]一种人工智能视频面试方法及系统

权利要求书

1.一种智能视频面试方法，其特征在于，其包括如下步骤：

1）根据应聘岗位给定一个面试问题；

2）让应聘者回答给定问题，并采集回答的面试视频；

3）将面试视频的音频信息识别转化为文本信息后，对文本信息内容与应聘岗位进行匹配度计算，输出匹配度计算结果；

4）将面试视频中的音频信息进行声纹评价，输出声纹评价结果；

5）从面试视频中提取给定数量的关键帧，识别每个关键帧的表情，并结合所有关键帧的表情识别结果进行面试表现评价，输出评价结果；

6）将步骤3）、4）、5）中的评价结果借助综合评价模型来进行岗位相关的综合评价，输出当前面试题的综合评价结果；

7）判断面试是否结束，若未结束，重复步骤1）至6），若面试结束，统计面试者每道题的综合评价结果，并根据应聘岗位特点和每道题的重要性计算并输出面试总分；

8）根据步骤3）至7）的输出结果生成打分报告、面试分析报告以及对面试者的面试反馈。

2.根据权利要求1所述的人工智能视频面试方法，其特征在于，步骤2）具体包括如下步骤：针对给定的面试问题，面试者可通过本地或远程视频在线回答面试题，也可以上传回答视频，进行回答。

3.根据权利要求1所述的人工智能视频面试方法，其特征在于，步骤4）具体包括如下步骤：提取面试视频中的音频信息，并针对面试者声音的变化通过端到端机器学习模型依次评估面试者的语速、音量、音调、紧张、流畅特性，形成多个维度的评估结论，并将每个维度分析结果综合起来，评估面试者的口语表达能力。

4.根据权利要求1所述的人工智能视频面试方法，其特征在于，步骤5）具体包括如下步骤：对面试者的面试视频中的表情变化，进行给定数量的关键帧截取，并通过端到端机器学习方法识别每个关键帧中面试者的表情，根据不同岗位对表情变化的要求，借助加权融合方法，综合所有关键帧结果，评估面试者的表情与情绪变化，给出表情评估结果。

5.根据权利要求14所述的人工智能视频面试方法，其特征在于，端到端机器学习方法识别面试者的表情，面试表情识别结果包括：开心、激动、紧张、呆滞、沮丧、自信、生气、颜值。

6.根据权利要求1所述的人工智能视频面试方法，其特征在于，步骤6）具体包括如下步骤：根据权利要求3）、4）、5）处理得出多维度分析结果，进行岗位综合评估，具体方法为：结合岗位特点，采用端到端的机器学习方法融合面试者在当前题目的表情评估结果、口语能力评估结果、岗位匹配度评估结果，生成对面试者本次面试回答的综合评估。

7.根据权利要求1所述的人工智能视频面试方法，其特征在于，步骤8）中，分析报告输出面试结果与面试说明并对面试者面试过程中出现的问题与优点集中说明，以报告方式呈现，其报告内容包含声音评估结果与建议、表情评估结果及建议、回答内容评估结果以及建议以及综合分析结果与建议。