[发明专利]基于Transformer模型的制造业多源异构数据融合方法

摘要

本发明公开了一种基于Transformer模型的制造业多源异构数据融合方法，包括：根据采集到的数据生成包含有不同模态异构数据的输入序列；对输入序列进行LMF低秩处理，生成向量h{L,A,V}；对输入序列进行一维的时间卷积层；增加位置嵌入，得到不同模态包含低层位置信息的特征将h{L,A,V}与进行矩阵拼接后，输入到基于跨模态注意力的Transformer模块中进行信息融合；通过一个序列模型Transfomer收集信息并提取序列模型的最后元素，通过全连接层得到融合特征。本发明通过将多个Transformer模块应用到制造业多源异构数据融合方案中，可以对制造业产生的多源异构数据进行快速融合，为后续的数据分析与决策提供技术支持。