科创中国

行业领域

新一代信息技术产业,互联网与云计算、大数据服务

需求背景

现有的大数据运维是基于服务器IP地址的SSH远程连接服务器，通过自动化脚本执行命令管理服务器，但是在大数据集群中往往是布置了成百上千台的服务器，若是采用手工操作进行维护，则其效率非常低下，难度也非常大，其中大量的运维脚本，杂乱无章，内容重复，质量难以保证，最终给故障留下隐患，没有对现网预期状态的定义和管理，所有的现网状态都是脚本日积月累的产物，导致服务器状态漂移，进而给业务稳定性留下隐患。

需解决的主要技术难题

1、难以建立虚拟机镜像，虚拟机镜像包括大数据平台系统的系统配置文件以及用户环境变量；

2、虚拟机镜像生成后无法保存到镜像仓库服务器，没有根据虚拟机镜像生成的时间顺序管理镜像版本；

3、不能根据需求将对应版本的虚拟机镜像发送至服务器上，服务器运行不了虚拟机镜像；

4、采集整个大数据服务器集群的日志文件，通过日志分析出现异常的服务器，但无法将日志分析中出现异常的服务器信息进行反馈；

期望实现的主要技术目标

1.针对反馈的异常服务器进行算法分析，判断是否需要做镜像恢复的操作，若是需要做镜像恢复操作，则通知镜像仓库服务器更新正常镜像给异常服务器做更新；

2.虚拟机镜像通过实例化生成一个容器，将所述容器运行在服务器中，通过虚拟机的文件映射机制，将服务器的文件直接映射到虚拟机，实现虚拟机直接访问服务器上的文件。

3.：在服务器的虚拟机中将虚拟机镜像实例化为容器，之后运行在服务器的虚拟机上，最后将所述虚拟机保存为虚拟机镜像。 

需求解析

解析单位：四川省成都市 解析时间：2022-10-27

朱玉玲

智慧云律（成都）网络服务有限公司

顾问

综合评价

通过虚拟化实现大数据平台版本管理：通过虚拟化实现系统环境、配置、数据分 离实现大数据集群的快速恢复和升级迭代；通过大数据平台自动运维系统，实现集群中出现故障服务器节点时可以自动完成故障节点的镜像恢复，实现大数据平台的故障节点的自动恢复；实现将脚本管理配置转换为镜像版本管理配置，并且通过自动化运维系统可以极大的减小人工介入的成本，大部分可以实现自动化和智能化的运维目标。

查看更多>

处理进度