[发明专利]盲人自助办理银行业务的方法及装置

权利要求书

1.一种盲人自助办理银行业务的方法，其特征在于，所述方法包括：

当检测到银行卡插入后，利用语音提示用户当前的操作步骤；

当操作步骤播报完成后，采集目标区域中用户的图像序列；

提取图像序列中用户的动作特征；

将提取的动作特征与动作库中的预设动作进行比对，确认用户的动作特征所指示的输入内容；

按照输入内容执行当前操作步骤，在当前操作步骤执行完成后，利用语音提示用户下一个操作步骤，并继续执行利用语音提示用户当前的操作步骤的后续步骤，如此循环直至完成银行业务办理的所有操作步骤。

2.根据权利要求1所述的方法，其特征在于，在采集目标区域中用户的图像序列之后，所述方法还包括：

提取图像序列中的人脸特征；

获取银行中留存的与银行卡对应的合法人脸信息；

将图像序列中的人脸特征与合法人脸信息进行比对；

如果图像序列中的人脸特征与合法人脸信息中的任意一个人脸相同，则确认当前用户为合法用户，提取图像序列中合法用户的动作特征。

3.根据权利要求2所述的方法，其特征在于，在将图像中的人脸特征与合法人脸信息相比对之后，所述方法还包括：

如果图像序列中的人脸特征与所有合法人脸信息均不相同，则通过留存的合法用户的联系方式，向合法用户发出告警信息。

4.根据权利要求1所述的方法，其特征在于，在将提取的动作特征与动作库中的预设动作进行比对之后，所述方法还包括：

如果提取的动作特征与动作库中的预设动作不匹配，则利用语音提示用户当前的动作特征为无效动作，并按照预设动作说明向用户提示有效动作的动作说明；

当语音提示完成后，重新采集目标区域中用户的图像序列。

5.根据权利要求1至4任一项所述的方法，其特征在于，所述动作特征包括手部动作特征和头部动作特征。

6.一种盲人自助办理银行业务的装置，其特征在于，所述装置包括：

语音提示模块，用于当检测到银行卡插入后，利用语音提示用户当前的操作步骤；

图像采集模块，用于当操作步骤播报完成后，采集目标区域中用户的图像序列；

特征提取模块，用于提取图像序列中用户的动作特征；

比对模块，用于将提取的动作特征与动作库中的预设动作进行比对，确认用户的动作特征所指示的输入内容；

操作执行模块，用于按照输入内容执行当前操作步骤，在当前操作步骤执行完成后，触发语音提示模块、图像采集模块、特征提取模块、比对模块针对用户下一个操作步骤重新执行，直至完成银行业务办理的所有操作步骤。

7.根据权利要求6所述的装置，其特征在于，

特征提取模块，还用于提取图像序列中的人脸特征；

获取模块，用于获取银行中留存的与银行卡对应的合法人脸信息；

比对模块，还用于将图像序列中的人脸特征与合法人脸信息进行比对；

特征提取模块，还用于当图像序列中的人脸特征与合法人脸信息中的任意一个人脸相同时，确认当前用户为合法用户，提取图像序列中合法用户的动作特征。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：

告警模块，用于当图像序列中的人脸特征与所有合法人脸信息均不相同时，通过留存的合法用户的联系方式，向合法用户发出告警信息。

9.根据权利要求8所述的装置，其特征在于，

语音提示模块，还用于当提取的动作特征与动作库中的预设动作不匹配时，利用语音提示用户当前的动作特征为无效动作，并按照预设动作说明向用户提示有效动作的动作说明；

图像采集模块，还用于当语音提示完成后，重新采集目标区域中用户的图像序列。

10.根据权利要求6至9任一项所述的装置，其特征在于，所述动作特征包括手部动作特征和头部动作特征。