[发明专利]周围人群信息识别方法、装置、设备及存储介质

权利要求书

1.一种周围人群信息识别方法，其特征在于，所述周围人群信息识别方法包括：

获取用户当前所在位置周围人群的音视频信息；

基于所述音视频信息，对周围人群中各第一个体对象分别进行生物特征提取，得到各所述第一个体对象的生物特征；

判断预置特征数据库中是否存在与所述第一个体对象的生物特征匹配的第二个体对象；

若所述特征数据库中存在与所述第一个体对象的生物特征匹配的第二个体对象，则获取所述第二个体对象的个人信息并向所述用户进行展示。

2.根据权利要求1所述的周围人群信息识别方法，其特征在于，所述基于所述音视频信息，对周围人群中各第一个体对象分别进行生物特征提取，得到各所述第一个体对象的生物特征包括：

对所述音视频信息进行音视频解码，得到对应的音频信息与视频信息；

对所述音频信息进行声纹特征提取以及对所述视频信息进行人脸特征提取，对应得到周围人群中各第一个体对象的声纹特征与人脸特征；

对所述声纹特征与所述人脸特征进行跨模态对齐，获得各所述第一个体对象的生物特征。

3.根据权利要求2所述的周围人群信息识别方法，其特征在于，所述对所述声纹特征与所述人脸特征进行跨模态对齐，获得各所述第一个体对象的生物特征包括：

依次将所述声纹特征与所述人脸特征映射到预置嵌入空间中；

在所述嵌入空间中，通过预置跨模态对齐模型对所述声纹特征与所述人脸特征进行跨模态对齐，得到各所述第一个体对象的生物特征，其中，所述生物特征包括声纹特征和/或人脸特征。

4.根据权利要求2所述的周围人群信息识别方法，其特征在于，在所述若所述特征数据库中存在与所述第一个体对象的生物特征匹配的第二个体对象，则获取所述第二个体对象的个人信息并向所述用户进行展示之后，还包括：

对所述音频信息进行语音识别，得到所述音频信息对应的文本数据；

对所述文本数据进行文本关键信息提取，获得交流关键词；

在识别出所述第一个体对象之后，将所述交流关键词记录在所述第一个体对象的个人信息中。

5.根据权利要求1所述的周围人群信息识别方法，其特征在于，所述判断预置特征数据库中是否存在与所述第一个体对象的生物特征匹配的第二个体对象包括：

依次计算各所述第一个体对象生物特征与预置特征数据库中存储的各特征模板之间的特征相似度；

当所述特征相似度大于预置相似度阈值时，停止相似度计算，确定所述特征数据库中存在与所述第一个体对象生物特征匹配的第二个体对象并输出；

当所述特征相似度小于预置相似度阈值且所述特征数据库中不存在未进行相似度计算的特征模板时，停止相似度计算，并确定所述特征数据库中不存在与所述第一个体对象生物特征匹配的第二个体对象。

6.根据权利要求1-5中任一项所述的周围人群信息识别方法，其特征在于，在所述判断预置特征数据库中是否存在与所述第一个体对象的生物特征匹配的第二个体对象之后，还包括：

若所述特征数据库中不存在与所述第一个体对象的生物特征匹配的第二个体对象，则在所述特征数据库中创建所述第一个体对象，并将所述第一个体对象的生物特征保存至所述特征数据库中。

7.根据权利要求1所述的周围人群信息识别方法，其特征在于，所述若所述特征数据库中存在与所述第一个体对象的生物特征匹配的第二个体对象，则获取所述第二个体对象的个人信息并向所述用户进行展示包括：

若所述特征数据库中存在与所述第一个体对象的生物特征匹配的第二个体对象，则判断所述第二个体对象是否存在已编辑的个人信息；

若是，则获取所述第二个体对象的个人信息并向所述用户进行展示，否则提醒所述用户对所述第二个体对象进行个人信息编辑。