[发明专利]大数据活动项目日志分析与资源调配方法

说明书

本发明公开了大数据活动项目日志分析与资源调配方法，采用本发明提供的方案将云资源宿主机日志、虚机日志、堡垒机日志以及监控摄像设备日志进行日志融合；基于云资源宿主机日志和虚机日志，对参与人员的资源进行调配；基于堡垒机日志以及监控摄像设备日志，判断参与人员是否有违规操作和恶意操作行为。通过实时监控参与人员在活动项目中的资源使用情况而实时并快速的调整其资源的配置，提升资源配置的效率和时效性。另外，还可以判断参与人员是否有违规操作或恶意操作行为，以保证活动项目过程中的数据的安全性。

技术领域

本发明涉及大数据分析技术领域，具体涉及大数据活动项目日志分析与资源调配方法。

背景技术

在大数据的环境下，大数据分析成为近几年的热点。大数据分析是采用私有云系统建设为基础，基于私有云环境架构建设大数据系统，结合当今大数据形势、主流设备、技术在数据挖掘与分析等方向而提供全面的搜索分析环境。通过动手实际操作，强化参与人员对大数据技术知识的理解，提高集群部署与数据分析操作能力。而大数据平台的运行依托于云计算系统，将云计算系统的计算资源与各种大数据资源整合在一起，向用户提供各种服务。

但现有技术中存在平台资源调配不合理的情况，由于各个参赛人员的不同，所需求的资源利用情况也不同，而不合理的资源调配将会造成活动项目所需时间长，效率低的问题；另外，针对现有技术中日志分析，一般是对单个系统的日志进行单独分析，而具有联系的多个系统的日志分析由于系统对应的日志的独立性，而导致根据日志分析的分析结果不全面的问题，因此，亟需一种方案可以解决现有技术中日志分析独立性以及资源调配效率低的问题。

发明内容

本发明提供大数据活动项目日志分析与资源调配方法，用以解决现有技术中不合理的资源调配将会造成活动项目所需时间长，资源调配效率低的问题。

本发明提供大数据活动项目日志分析与资源调配方法，该方法包括：

将云资源宿主机日志、虚机日志、堡垒机日志以及监控摄像设备日志进行日志融合；

基于云资源宿主机日志和虚机日志，对参与人员的资源进行调配；

基于堡垒机日志以及监控摄像设备日志，判断参与人员是否有违规操作和恶意操作行为；

所述基于云资源宿主机日志和虚机日志，对参与人员的资源进行调配，包括：

基于云资源宿主机日志和虚机日志，获得参与人员的CPU利用率、内存以及存储空间的信息；

基于参与人员的CPU利用率、内存以及存储空间的信息，确定所述参与人员的资源占比；所述资源占比包括：基于CPU回放功能确定预设的历史时间段内所述参与人员的CPU利用率占比，以及内存占比和存储空间占比；所述CPU利用率占比是基于CPU共享的情况；

判断所述参与人员的资源占比是否在第一阈值范围之内；

若否，对所述参与人员的资源进行第一次资源调配；

所述基于堡垒机日志以及监控摄像设备日志，判断参与人员是否有违规操作和恶意操作行为，包括：

基于监控摄像设备获得存储的视频或图像；

采用视频和图像识别处理系统对存储的视频或图像进行识别处理，获得文本格式的识别结果，将所述文本格式的识别结果对接至日志分析系统形成监控摄像设备日志；

所述日志分析系统通过对监控摄像设备日志和堡垒机日志的分析，判断参与人员是否有违规操作和恶意操作行为；所述大数据活动项目要求参与人员不得自行获取活动项目相关材料的行为，以及不允许具有恶意操作行为。

优选的，当判断所述参与人员的资源占比是否在第一阈值范围之外时，判断所述参与人员的资源占比是否在第二阈值范围内；所述第二阈值范围大于所述第一阈值范围；