[发明专利]装配拧紧过程样本采集系统、深度学习网络及监测系统

摘要

本发明涉及装配拧紧过程样本采集，其通过视频采集装置采集视频信息、肌电装置采集人体的肌电信号、惯性加速度信号和方位信号，扭矩采集装置采集到的扭矩信息，计算机接收并按时间标签存储，从而得到能用于机器学习的样本库。本发明还涉及装配拧紧过程的监测系统，第二计算机识别图像中的人体骨骼节点，并计算出各个骨骼节点的坐标信息；将骨骼节点的坐标信息、肌电信号、惯性加速度信号和方位信号输入到深度学习网络中，输出监测扭矩值，将监测扭矩值与预设的扭矩参考值进行比较，判断拧紧过程是否异常，实现监测拧紧过程不受场地、环境限制，监测过程不使用力矩传感器，能够对力矩信息和扭转圈数进行监测，并将异常情况第一时间反馈给操作人员。

主权项

1.装配拧紧过程样本采集系统，其特征在于，包括视频采集装置（1）、可穿戴式肌电装置（2）、扭矩采集装置（3）以及第一计算机（4），所述视频采集装置（1）采集视频信息并发送给第一计算机（4），所述肌电装置（2）采集人体的肌电信号、惯性加速度信号和方位信号，然后发送给第一计算机（4），所述扭矩采集装置（3）将采集到的操作人员拧紧螺母时的扭矩信息发送给第一计算机（4），所述第一计算机（4）执行如下步骤：识别视频信息中人体的骨骼节点，并计算出各个骨骼节点的坐标信息；将骨骼节点坐标信息以及接收到的肌电信号、惯性加速度信号、方位信号、扭矩信息、视频信息均按照时间标签存储；从视频信息中按时间标签提取图片，将所述图片、肌电信号、惯性加速度信号、方位信号、骨骼节点坐标信息作为样本数据，将所述扭矩信息作为实测值，从而得到能用于机器学习的样本库。