[发明专利]业务模型的跨境流转方法、装置及存储介质在审
申请号: | 202111266754.8 | 申请日: | 2021-10-28 |
公开(公告)号: | CN113992659A | 公开(公告)日: | 2022-01-28 |
发明(设计)人: | 马超;崔洋;彭岗;殷文莉 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | H04L67/06 | 分类号: | H04L67/06;H04L67/60;H04L9/40;H04L41/14 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 刘熔;赵平 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 业务 模型 流转 方法 装置 存储 介质 | ||
本说明书实施例涉及大数据技术领域,具有公开了一种业务模型的跨境流转方法、装置及存储介质,通过预先构建实现文件单向流转的文件传输机制,并将该文件传输机制作为代理节点独立部署在开发、测试、生产等对应的业务环境中,从而可以按照最小需求原则,仅开通必要的文件传输端口,即可实现模型文件的跨环境传输。通过本说明书提供的文件传输机制及部署方式,可以避免暴露各业务环境关键节点的地址信息,提高传输的安全性以及准确性。
技术领域
本说明书涉及大数据技术领域,特别地,涉及一种业务模型的跨境流转方法、装置及存储介质。
背景技术
MLOps(Machine Learning Operations,机器学习操作)系统是一种实现大数据模型全生命周期集成化管理的解决方案。该系统主要包括三部分,分别是为大数据建模分析而准备数据的应用程序、执行计算和分析的工具、以及自动移动大数据模型和生命周期中关联数据的工具,涵盖模型开发、测试、生产等全部流转环节,能够有效降低模型落地成本,缩短建模周期,提升模型交付效率。
业界内不同业务背景的公司部署模型时会采用不同的MLOps模式。银行等金融机构尤为重视数据与技术安全,使得其模型构建以及交付过程更加复杂、安全性要求更高。通常,金融机构的模型构建以及交付需按照生产建模、开发对接、测试、生产部署四个环节进行,并采用开发、测试、生产三套独立运行的环境分别支撑对应环节的部署任务,模型及关联数据需经过跨环境流转交付到其他环境的模型仓库中。同时,各环境之间的防火墙除开通必要端口外均完全隔离,各环境的火墙开通需遵循最小需求原则,不能暴露关键节点IP信息,以满足安全管控的需求。
在这种模式下,MLOps系统的自动移动大数据模型和生命周期中关联数据的工具就必须满足模型跨环境安全流转和部署的需要,确保模型以及配套元数据等信息的安全性,避免出现模型泄露等问题。
发明内容
本说明书实施例的目的在于提供一种业务模型的跨境流转方法、装置及存储介质,可以提高业务模型文件跨环境流转的安全性以及准确性。
本说明书提供一种业务模型的跨境流转方法、装置及存储介质是包括如下方式实现的:
一种业务模型的跨境流转方法,所述方法应用于跨境流转装置,所述装置部署在业务系统的业务环境中,所述装置至少包括调度模块、关联数据拉取模块、文件传输模块、文件接收模块;以接收模型跨环境转出请求的业务环境作为第一业务环境,以接收模型跨环境转入请求的业务环境作为第二业务环境;所述方法包括:第一业务环境的调度模块接收模型跨环境转出请求;所述转出请求至少包括转出模型的模型参数信息以及第二业务环境的环境参数信息;第一业务环境的调度模块生成所述转出请求的第一任务标识,并将所述模型参数信息以及环境参数信息与所述第一任务标识关联后存储至数据库中,得到第一任务记录;以及将所述第一任务标识传输给第一业务环境的拉取模块;第一业务环境的拉取模块依据接收的所述第一任务标识所关联的第一任务记录,从第一业务环境的模型仓库中拉取对应的模型文件至第一指定目录中;并将所述模型文件的名称以及第一指定目录写入所述第一任务记录中;以及将所述第一任务标识传输给第一业务环境的文件传输模块;第一业务环境的文件传输模块依据接收的所述第一任务标识所关联的第一任务记录,从所述第一指定目录中调取模型文件并传输给第二业务环境的文件接收模块,以使第二业务环境的文件接收模块将模型文件存储至第二业务环境的模型仓库中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111266754.8/2.html,转载请声明来源钻瓜专利网。