[发明专利]一种基于人脸识别的翻译系统及其方法

权利要求书

1.一种基于人脸识别的翻译系统，包括用户的客户端设备和系统服务器，其特征在于：

所述系统包括摄像模块、人脸检测模块、人脸识别模块、翻译模块、信息交互模块、通讯模块和数据库；

所述摄像模块设置客户端设备，用于获取现实场景中的图像；

所述人脸检测模块设置在客户端设备，用于检测现实场景的图像中用户的人脸图像及获取人脸数据；

所述人脸识别模块设置在客户端设备或系统服务器，用于识别对比人脸检测模块所获取的当前用户的人脸数据是否为系统用户；

所述翻译模块设置在客户端设备或系统服务器，用于翻译用户之间的会话；

所述信息交互模块用于播放或显示用户通过客户端设备摄像模块获取并通过人脸识别模块识别出的当前的系统用户头像、昵称以及所使用的语言至少其中之一，并通过所述信息交互模块及所述翻译模块与所述当前的系统用户进行语音或文字的信息交互。

所述数据库，设置在客户端设备或系统服务器，用于存储用户的人脸数据或注册信息；

所述通讯模块安装在客户端设备上，用于通过系统服务器实现用户之间的通讯连接，以及与用户的另一设备之间的通讯连接。

2.如权利要求1所述的翻译系统，其特征在于：

所述客户端设备为手机、平板电脑、智能眼镜、智能耳机中的一种或两种组合使用；

对于一个用户使用两个客户端设备的，所述通讯模块安装在智能眼镜或智能耳机上，与手机的通讯模块进行通讯连接；

所述一个用户使用两个客户端设备，其中之一与系统服务器进行通讯连接。

3.如权利要求1或2所述的翻译系统，其特征在于：

所述信息交互模块还包括语音拾取模块和语音播放模块，安装在所述客户端设备上。

4.如权利要求1或2所述的翻译系统，其特征在于：

所述信息交互模块还包括信息输入模块和显示模块，安装在所述客户端设备上。

5.一种基于人脸识别的翻译系统的翻译方法，其特征在于：

步骤S00，用户注册，注册系统的每个用户至少将自己的人脸信息、所使用的语言、昵称、头像中的人脸信息和所使用的语言在系统中注册，保存在数据库中；

步骤S01，系统用户A通过其客户端设备摄像头获取当前场景的人脸图像，提取人脸特征数据；

步骤S02，系统将所提取的人脸特征数据与数据库中的人脸特征数据进行对比匹配，是否为系统用户，若是，则进入下一步骤，若不是，则返回上一步；

步骤S03，当对比匹配结果为系统用户B，则提取所述用户B所使用的语言、昵称、头像中至少提取所使用的语音和/或昵称发送给用户A；

步骤S04，用户A通过信息交互模块输入发送给用户B的语音或文字信息，发送给翻译模块；

步骤S05，翻译模块根据所述用户B所使用的语言将所述用户A所输入的语音或文字翻译成所述用户B所使用的语言向所述用户B发送；

步骤S06，所述用户B接收所述用户A发送的语音或文字信息，以所述用户B所使用的语言播放或显示；

或，上述步骤S04至步骤S06用以下步骤S04至步骤S07所替代：

步骤S04，用户A通过信息交互模块输入发送给用户B的语音或文字信息，发送给翻译模块；

步骤S05，翻译模块根据所述用户B所使用的语言将所述用户A所输入的信息翻译成用户B所使用的语言，向服务器请求发送给用户B；

步骤S06，服务器接受请求，将所述信息发送给用户B；

步骤S07，所述用户B接收所述用户A发送的语音或文字信息，以所述用户B所使用的语言播放或显示；

或，上述之上述步骤S04至步骤S06用以下步骤S04至步骤S07所替代：

步骤S04，用户A通过信息交互模块输入发送给用户B的语音或文字信息，向服务器请求将所述信息发送给用户B；

步骤S05，服务器接受请求，将所述信息发送给用户B；

步骤S06，所述用户B客户端设备接收所述用户A发送的语音或文字信息，传输给翻译模块；

步骤S7，所述翻译模块识别所述用户A所使用的语言，将所述用户A的信息翻译成用户B所使用的语言，播放或显示。