[发明专利]基于多模态的金库出入库信息自动核对方法及装置

摘要

本申请公开了一种基于多模态的金库出入库信息自动核对方法及装置，涉及金融领域。该方法包括：获取办理当前出入库业务时的音频数据、视频数据以及管库员针对本次出入库业务填写的库存登记表图像数据；对音频数据进行声纹识别和语音识别，得到说话人的身份、说话人的数量及语音内容；根据视频数据以及预先创建的图像分析模型进行图像识别，得到视频内容；采用光学字符识别技术对库存登记表图像数据进行扫描，得到对应的字段数据；根据说话人的身份、说话人的数量、语音内容、视频内容以及字段数据确定金库出入库信息的核对结果。本申请借由丰富的模态特征对金库出入库业务进行管理，缩短业务耗时，减少了错账、漏账，提升银行金库运营管理效能。