[发明专利]一种提供辅助服务的装置及方法

权利要求书

1.一种提供辅助服务的装置，其特征在于，包括：信息采集模块、身份识别模块、语音分析模块和服务内容提供模块；其中，

信息采集模块，包括视频采集单元和音频采集单元，所述视频采集单元采集其拍摄范围内的视频内容，所述音频采集单元采集其接收范围内的音频内容；

身份识别模块，响应于视频采集单元采集的视频内容中出现多个人脸，对所述视频采集单元采集的视频内容进行人脸识别，获取各个人脸的脸部信息；基于获取的各个人脸的脸部信息和预先形成的场景人脸数据集，确定各个人脸所属的身份类型；所述场景人脸数据集表征人脸的脸部信息与身份类型的关联关系；

语音分析模块，对音频采集单元采集的音频内容进行语音识别，以及对语音识别单元识别的语音内容进行语义识别，获取关键信息；以及

服务内容提供模块，基于身份识别模块确定的各个人脸所属身份类型的组合和语音分析模块获取的关键信息，提供服务内容进行展示。

2.根据权利要求1所述的装置，其特征在于，所述服务内容提供模块根据身份识别模块确定的各个人脸所属身份类型的组合，确定所述组合拥有的权限级别；根据语音分析模块获取的关键信息和所述权限级别，提供服务内容进行展示。

3.根据权利要求2所述的装置，其特征在于，所述服务内容提供模块根据语音分析模块获取的关键信息，给出满足所述权限级别的备选服务内容；按照用户的指示，从备选服务内容中确定服务内容，并提供所确定的服务内容进行展示。

4.根据权利要求1所述的装置，其特征在于，所述身份识别模块，还用于响应于视频采集单元采集的视频内容中出现多个人脸或多人的声纹，对所述音频采集单元采集的音频内容进行声纹识别，获取各个人脸对应的声纹信息；附加地基于获取各个人脸对应的声纹信息，确定各个人脸所属的身份类型；所述场景人脸数据集表征人脸的脸部信息和对应的声纹信息与身份类型的关联关系。

5.根据权利要求1或4所述的装置，其特征在于，所述音频采集模块持续采集其接收范围内的音频内容，或者按照用户的指示开始或停止采集其接收范围内的音频内容，或者响应于所述视频采集模块采集的视频内容中出现新的人脸，开始采集其接收范围内的音频内容，并在所述身份识别模块获取到所述新的人脸的脸部信息后停止采集其接收范围内的音频内容；

和/或，

所述视频采集模块持续采集其拍摄范围内的视频内容，或者按照用户的指示开始或停止采集其拍摄范围内的视频内容，或者响应于所述音频采集模块采集的音频内容中出现新的声纹信息，开始采集其拍摄范围内的视频内容，并在所述身份识别模块获取到所述新的声纹信息后停止采集其拍摄范围内的视频内容。

6.根据权利要求1所述的装置，其特征在于，如果获取的人脸的脸部信息已经保存在所述场景人脸数据集中，则所述场景人脸数据集中保存的与所述获取的人脸的脸部信息关联的身份类型确定为该人脸所属的身份类型；如果获取的人脸的脸部信息未保存在所述场景人脸数据集中，则通过互联网搜索所述获取的人脸的脸部信息对应的身份类型及相应的更新时间，如果搜索到所述获取的人脸的脸部信息对应的身份类型，并且该更新时间距离当前时间的时间间隔在预设阈值范围内，则将该搜索到的身份类型，确定为所述人脸所属的身份类型；如果搜索到所述获取的人脸的脸部信息对应的身份类型，但该更新时间距离当前时间的时间间隔不在预设阈值范围内，或者未搜索到所述获取的人脸的脸部信息对应的身份类型，则确定所述人脸所属的身份类型为陌生人。

7.根据权利要求1所述的装置，其特征在于，所述提供的服务内容中包括需要重新验证身份类型才准予执行的功能，响应于身份类型验证通过，执行所述功能；

和/或，

所述提供的服务内容设置有保密等级，在所述保密等级需要对相关人员进行身份核查时，仅对该相关人员的人脸的脸部信息进行确认。