[发明专利]基于声纹和人脸识别的机器人交互方法

摘要

本发明公开了一种基于声纹和人脸识别的机器人交互方法，其包括人脸识别部分和声纹识别部分；人脸识别部分是基于人的脸部特征，对输入的人脸图像或者视频流判断其是否存在人脸，来自用户集内哪位用户；声纹识别部分是通过一段语音信号来判断这段语音来自用户集内的哪位用户。本发明通过人脸识别技术、表情检测技术和声纹技术实现基于说话人身份和情绪的智能问答，能很好的与提问者进行交流。

主权项

一种基于声纹和人脸识别的机器人交互方法，其特征在于，所述基于声纹和人脸识别的机器人交互方法包括人脸识别部分和声纹识别部分；人脸识别部分是基于人的脸部特征，对输入的人脸图像或者视频流判断其是否存在人脸，存在人脸则进一步的给出每个脸的位置、大小和各个主要面部器官的位置信息，并依据这些信息，进一步提取每个人脸中所蕴涵的身份特征，并将其与已知的人脸进行对比，从而识别每个人脸的身份和表情，来自用户集内哪位用户；声纹识别部分是通过一段语音信号来判断这段语音来自用户集内的哪位用户，首先通过大量说话人的语料，进行系统模型空间训练，生成系统所需要的空间参数；然后对于需要识别的说话人进行注册，通过注册说话人声纹生成部分，生成用户集内每个注册说话人的声纹；最后，在实际应用中，对需要识别的说话人语音生成声纹，与用户集内每个注册说话人的声纹进行对比，得出是用户集内哪个说话人。