[发明专利]大数据工作流构建方法、系统、计算机设备及存储介质

说明书

本发明公开了一种大数据工作流构建方法，包括：构建具有特定功能的工具模块，所述工具模块具有统一的标准化参数；将可视化技术、拖拽技术及资源管理技术相结合，以构建拖拽式可视化前端；在所述拖拽式可视化前端，通过拖拽方式拖拽所述工具模块以构建工作流。本发明还公开了一种大数据工作流构建系统、一种计算机设备及一种计算机可读存储介质。采用本发明，可实现工具的模块化及参数的标准化，还能将可视化技术、拖拽技术、资源管理技术及WDL技术相结合，以建立工作流。

技术领域

本发明涉及医学大数据分析领域，尤其涉及一种大数据工作流构建方法、一种大数据工作流构建系统、一种计算机设备及一种计算机可读存储介质。

背景技术

近年来，NCBI、EBI等国际知名生物信息学研究所的生命组学大数据分析平台，以及DNAnexus等世界著名商业性的精准医学大数据分析平台，支撑了海量的学术和临床研究工作，并创造了巨大的经济价值。然而，这些平台大多是封闭式或半封闭式的网络应用系统，用户依然难以实施灵活科研和临床的一体化集成分析，也无法实现分析方法与流程的社区化共享。因此，我国精准医学大数据相关重点研发项目需要突破相关技术难点和瓶颈，亟待建立精准医学大数据的分析应用的系统方法。

另外，由于现有的大数据分析平台还没有实现工具的模块化，也没有形成工具对接的标准，因此无法实现基于标准的灵活的组合；同时，由于现有的大数据分析平台还需要很多底层的对接步骤，没有可视化功能，从而未能实现可视化拖拽来建立流程。因此，建立灵活性强、可视化的精准医学大数据的分析应用系统是目前急需解决的问题。

发明内容

本发明所要解决的技术问题在于，提供一种大数据工作流构建方法、系统、计算机设备及计算机可读存储介质，可实现工具的模块化及参数的标准化，还能将可视化技术、拖拽技术、资源管理技术及WDL技术相结合，以建立工作流。

为了解决上述技术问题，本发明提供了一种大数据工作流构建方法，包括：构建具有特定功能的工具模块，所述工具模块具有统一的标准化参数；将可视化技术、拖拽技术及资源管理技术相结合，以构建拖拽式可视化前端；在所述拖拽式可视化前端，通过拖拽方式拖拽所述工具模块以构建工作流。

作为上述方案的改进，所述标准化参数包括变量参数、字符串参数、文件参数、可选参数及上一步输出参数，其中，所述变量参数为后端对接变量的参数类型；所述字符串参数为以字符串输入的参数类型；所述文件参数为输出文件的参数类型；所述可选参数为可选的参数类型；所述上一步输出参数为工作流中对接上一步输出结果的参数类型。

作为上述方案的改进，所述构建具有特定功能的工具模块的步骤包括:提取工具以构建具有特定功能的工具模块，所述工具之间通过串联和/或并联的方式进行链接。

作为上述方案的改进，所述将可视化技术、拖拽技术及资源管理技术相结合以构建拖拽式可视化前端的步骤中的可视化技术包括：通过Vue、Vue路由工具及Element UI进行前端开发，并通过Px转Rem进行自适应缩放；通过Anime.js动画插件、Vue-clipboard剪切板插件、JsPlumb绘图组件、jQuery处理数据及DOM绘制工作流程图；通过Sass及SVG编译器对图片及样式进行编译；通过Axios与后端数据进行数据交互。

作为上述方案的改进，所述将可视化技术、拖拽技术及资源管理技术相结合以构建拖拽式可视化前端的步骤中的拖拽技术包括：通过Vue-clipboard剪切板插件对所述工具模块进行复制粘贴处理；通过Vue-draggable插件对所述工具模块进行可拖拽化处理；通过Anime.js对所述工具模块进行拖拽式动画变换过程处理；通过JsPlumb对所述工具模块间的箭头进行连接处理。

作为上述方案的改进，所述将可视化技术、拖拽技术及资源管理技术相结合以构建拖拽式可视化前端的步骤中的资源管理技术包括：通过Npm进行Node.js下的包管理；通过Webpack进行前端资源模块化管理及打包；通过WebSocket协议进行通信。