[发明专利]汽车缺陷数据自动录入方法、系统、设备及介质

权利要求书

1.一种汽车缺陷数据自动录入方法，其特征在于，所述方法包括如下步骤：

接收用户的音频数据；

对所述音频数据进行语音识别，确定所述音频数据所对应的缺陷信息；

采集汽车的缺陷位置的缺陷区域图像；

对所述缺陷区域图像进行缺陷区域识别，确定缺陷区域的标识信息；

存储所述缺陷信息和所述缺陷区域的标识信息。

2.根据权利要求1所述的汽车缺陷数据自动录入方法，其特征在于，所述对所述音频数据进行语音识别，包括如下步骤：

将所述音频数据输入至训练好的声学特征模型，提取所述音频数据中的声学特征；

将所述音频数据中的声学特征输入至训练好的语音识别模型，识别所述声学特征所对应的文本识别结果；

从所述文本识别结果中提取与预设的缺陷属性相对应的缺陷属性值，作为所述音频数据所对应的缺陷信息。

3.根据权利要求1所述的汽车缺陷数据自动录入方法，其特征在于，所述对所述缺陷区域图像进行缺陷区域识别，包括如下步骤：

将所述缺陷区域图像与预存的多个车身区域图像进行比对，选择与所述缺陷区域图像相似度最大的车身区域图像的标识信息作为所述缺陷区域的标识信息。

4.根据权利要求3所述的汽车缺陷数据自动录入方法，其特征在于，所述将所述缺陷区域图像与预存的多个车身区域图像进行比对，包括如下步骤：

将所述缺陷区域图像输入训练好的特征提取网络，提取所述缺陷区域图像的特征向量；

将所述缺陷区域图像的特征向量与车身区域特征库中的多个车身区域图像的特征向量进行比对，选择相似度最大的特征向量所对应的标识信息作为所述缺陷区域的标识信息。

5.根据权利要求3所述的汽车缺陷数据自动录入方法，其特征在于，所述车身区域图像的标识信息包括车身区域的编号、车身区域的名称、车身区域所对应的零件编号或车身区域所对应的零件名称。

6.根据权利要求1所述的汽车缺陷数据自动录入方法，其特征在于，所述采集汽车的缺陷位置的缺陷区域图像，包括如下步骤：

在用户前方显示指示拍摄位置的光斑；

接收到用户的拍摄语音指令时，采集所述光斑所对应的位置处的缺陷区域图像。

7.根据权利要求6所述的汽车缺陷数据自动录入方法，其特征在于，所述在用户前方显示指示拍摄位置的光斑，包括在用户佩戴的AR设备的镜片处显示面板中显示指示拍摄位置的光斑；

通过设置于所述AR设备上的麦克风接收到用户的拍摄语音指令时，通过设置于所述AR设备上的摄像头采集所述光斑所对应的位置处的缺陷区域图像。

8.根据权利要求7所述的汽车缺陷数据自动录入方法，其特征在于，所述存储所述缺陷信息和所述缺陷区域的标识信息，包括如下步骤：

将所述缺陷信息和所述缺陷区域的标识信息显示于所述AR设备的显示面板中；

接收到用户的确认语音指令时，存储所述缺陷信息和所述缺陷区域的标识信息。

9.一种汽车缺陷数据自动录入系统，其特征在于，应用于权利要求1至8中任一项所述的汽车缺陷数据自动录入方法，所述系统包括：

音频采集模块，用于接收用户的音频数据；

音频识别模块，用于对所述音频数据进行语音识别，确定所述音频数据所对应的缺陷信息；

图像采集模块，用于采集汽车的缺陷位置的缺陷区域图像；

图像识别模块，用于对所述缺陷区域图像进行缺陷区域识别，确定缺陷区域的标识信息；

数据录入模块，用于存储所述缺陷信息和所述缺陷区域的标识信息。

10.根据权利要求9所述的汽车缺陷数据自动录入系统，其特征在于，所述音频采集模块和图像采集模块设置于一AR设备中，所述AR设备上设置有摄像头和麦克风；

所述音频采集模块通过所述麦克风接收用户的音频数据；

所述图像采集模块通过所述摄像头采集汽车的缺陷位置的缺陷区域图像。