[发明专利]一种数据处理方法及装置

说明书

本申请公开了一种数据处理方法及装置，具体地，可以获取待处理声音数据和待处理图像序列。将所述待处理声音数据和所述待处理图像序列，输入事件分析模型，得到对应的事件类型。其中，所述待处理声音数据为声音采集设备在第一时间段内采集的声音；所述待处理图像序列为声音采集设备在所述第一时间段内采集的图像。由于所述事件分析模型，是基于训练样本和该训练样本对应的事件类型训练得到的。该训练样本，包括在历史时间段内采集得到的历史声音数据和历史图像数据。因此，该事件分析模型，可以准确的根据输入的待处理声音数据和待处理图像序列，输出对应的事件类型。因此，利用本申请实施例提供的方案，可以准确的确定出是否存在异常事件。

技术领域

本申请涉及数据处理领域，特别是涉及一种数据处理方法及装置。

背景技术

随着科学技术的发展，出现了一些声音采集设备和图像采集设备，声音采集设备可以用于采集一定范围内的声音。图像采集设备用于采集一定范围内的图像。目前，为了保证用户的人身以及财产安全，在一些涉及公共安全的区域例如小区、花园等都可以安装声音采集设备和图像采集设备，用于采集对应的声音数据和图像。通过对声音数据或者图像进行分析，来确定是否存在异常事件，例如，确定是否出现人员异常聚集，又如，确定用户是否遭遇打劫而需要帮助等等。

但是，目前对声音数据或者图像进行分析的效果不好，从而使得无法准确的判断出是否存在异常事件。

发明内容

本申请所要解决的技术问题是传统技术中对声音数据或者图像进行分析的效果不好，提供一种数据处理方法及装置。

第一方面，本申请实施例提供了一种数据处理方法，所述方法包括：

获取待处理声音数据和待处理图像序列；所述待处理声音数据为声音采集设备在第一时间段内采集的声音；所述待处理图像序列为声音采集设备在所述第一时间段内采集的图像；

将所述待处理声音数据和所述待处理图像序列，输入事件分析模型，得到对应的事件类型；所述事件分析模型，是基于训练样本和所述训练样本对应的事件类型训练得到的，所述训练样本，包括历史声音数据和历史图像序列，所述历史声音数据和历史图像序列为在历史时间段内采集得到的。

可选的，所述事件分析模型，包括第一特征提取层、第二特征提取层、第一特征融合层和输出层；

所述第一特征提取层，用于提取所述待处理图像序列的图像特征；

所述第二特征提取层，用于提取所述待处理声音数据的声音特征；

所述第一特征融合层，用于对所述第一特征提取层提取的图像特征和所述第二特征提取层提取的声音特征进行融合，得到第一融合特征；

所述输出层，用于根据所述第一融合特征，输出所述事件类型。

可选的，所述第一特征提取层，包括：第一神经网络和第二神经网络；所述第一神经网络的输入为所述待处理图像序列，所述第一神经网络的输出，为所述第二神经网络的输入；所述第二神经网络的输出为所述第一特征提取层的输出；

所述第一神经网络，用于提取所述待处理图像序列中每一帧图像的图像特征；

所述第二神经网络，用于基于所述第一神经网络所提取的所述每一帧图像的图像特征，得到体现所述待处理图像序列中多帧图像之间的关联的图像特征。

可选的，所述第二特征提取层，包括：第三神经网络；所述第三神经网络的输入为所述待处理声音数据，所述第三神经网络的输出，为所述第二特征提取层的输出。

可选的，所述待处理声音数据为多个声音采集设备在所述第一时间段内采集的声音，所述待处理图像序列，为多个图像采集设备在所述第一时间段内采集的图像序列。

可选的，所述事件分析模型，还包括：第二特征融合层；