[发明专利]一种基于视觉识别的邮件自动分拣装置及方法

权利要求书

1.一种基于视觉识别的邮件自动分拣装置，其特征在于：包括图像采集单元、OCR模型搭建单元、识别处理单元、分拣单元，其中

所述图像采集单元包括工业摄像头、可调式光源、第一传送带、二轴云台和云台座；所述图像采集单元用于采集邮件图像信息，所述工业摄像头用于采集邮件图像，所述可调式光源根据环境亮度情况为采集邮件图像提供合适的光源；所述二轴云台和云台座用于控制和支撑工业摄像头，所述第一传送带用于将邮件传送到工业摄像头正下方；

所述OCR模型搭建单元包括样本字体采集模块、标签管理模块、样本预处理模块和训练模块；所述样本字体采集模块用于从工业摄像头采集到的图像中提取出字体区域；所述标签管理模块用于管理提取出的字体区域的字符标签，其管理功能包括添加、查看、修改和删除标签；所述样本预处理模块用于处理字体区域，提取出适用于训练的二值化字符；所述训练模块用于将建立识别字体的神经网络模型；

所述识别处理单元包括图像预处理模块、OCR识别模块、控制调节模块、显示模块、接口模块；所述图像预处理模块用于处理字体区域，提取出适用于识别的二值化字符；所述OCR识别模块用于识别二值化字符，将图像预处理得到的二值化字符放入OCR模型搭建单元得出的神经网络模型，得出字符识别结果；所述控制调节模块用于根据字符识别结果，判断邮件所属的类别，控制分拣单元对邮件进行分拣；所述显示模块用于显示识别和分拣结果，用户通过显示模块检测分拣流程；所述接口模块实现与OCR模型搭建单元和分拣单元连接；

所述分拣单元包括第二传送带、设置在第二传送带上的M个隔板，M个分类收集箱，其中M≥1；所述隔板、第二传动带传送带均由控制调节模块控制，用于将特定分类的邮件推入分类收集箱内；所述第二传送带用于将邮件传送至隔板所在位置。

2.根据权利要求1所述基于视觉识别的邮件自动分拣装置，其特征在于：所述工业摄像头为高帧率的可变焦摄像头。

3.根据权利要求1所述基于视觉识别的邮件自动分拣装置，其特征在于：所述可调式光源为环形LED光源。

4.根据权利要求1所述基于视觉识别的邮件自动分拣装置，其特征在于：所述OCR模型搭建单元、识别处理单元集成在微型PC中。

5.一种基于视觉识别的邮件自动分拣方法，其特征在于：包括OCR模型搭建阶段和OCR模型应用分拣邮件阶段；其中

OCR模型搭建阶段，将样本邮件放上传送带，由图像采集单元采集样本邮件的图像信息，传输给微型PC；微型PC中的OCR模型搭建单元，从样本邮件图像中提取字符信息，结合用户输入的字符标签，构建用于OCR识别的神经网络模型；

OCR模型应用分拣邮件阶段，将待分拣的邮件放上传送带，由图像采集单元采集待分拣邮件的图像信息，传输给微型PC；微型PC中的处理识别单元，从图像中提取字符信息，应用OCR模型搭建阶段训练出神经网络模型，进行字符识别；根据字符识别结果，微型PC中的控制调节模块判断邮件应该分属的类别，然后控制隔板将邮件推入对应类别的收集箱；用户通过显示屏监测识别和分拣结果。

6.一种基于视觉识别的邮件自动分拣方法，其特征在于：包括四个部分：提取字符区域、OCR模型获取、识别快件和分拣快件；其中

提取字符区域，对从图像采集模块得到的图像进行形态学处理，获取字符区域，并将字符数据随机分组为训练集和测试集；

OCR模型获取，用户选择使用预设识别模型，或选择使用自定义识别模型：若选择使用自定义识别模型，则对前一步骤获得的字符训练集进行神经网络训练，获得更高识别精度的OCR识别模型，用字符测试集输入OCR识别模型检验其效果，若效果好则进入下一步骤，否则重新搭建OCR识别模型；若选择使用预设识别模型，则同样用字符测试集检测其效果，效果好进入下一步骤，否则重新搭建；

识别快件，快件信息页朝上，通过传送带进入工业摄像头视野，图像采集单元对得到的图像进行形态学处理，获取字符区域；将字符输入上一步骤得到的神经网络模型，得到字符识别结果；

分拣快件，根据得到的字符识别结果，确定快件所属类别，控制隔板将快件推入对应的快件收集箱中。