大数据集群管理控制方法、装置、计算机设备及存储介质制造方法及图纸

技术编号:23851943 阅读:36 留言:0更新日期:2020-04-18 09:06
本发明专利技术实施例公开了一种大数据集群管理控制方法、装置、计算机设备及存储介质,包括下述步骤:获取分布式服务器集群中各目标站点的环境信息;根据各目标站点的环境信息对应的配置每个目标站点的配置文件;根据各配置文件和预设的大数据集群镜像文件对应地对每个目标站点进行大数据集群系统管理控制。本发明专利技术实施例通过获取分布式服务器集群中各目标站点的环境信息,再根据该各目标站点的环境信息对应的配置每个目标站点的配置文件,然后根据各配置文件和预设的大数据集群镜像文件对应地对每个目标站点进行大数据集群系统安装,批量进行大数据集群系统的安装和参数配置,能有效加快大数据集群的安装速度,提高大数据集群的运维效率。

Big data cluster management control method, device, computer equipment and storage medium

【技术实现步骤摘要】
大数据集群管理控制方法、装置、计算机设备及存储介质
本专利技术实施例涉及大数据平台
,尤其是一种大数据集群管理控制方法、装置、计算机设备及存储介质。
技术介绍
进入信息高度发展的阶段,数据处理的作用和地位越来越高,许多公司都在构建自己的大数据平台,用于大数据平台系统集群的创建、管理和监控。但是,大数据集群一般需要多台服务器,使得搭建大数据集群需要耗费很多时间进行重复性工作,且对于大数据集群中的大数据组件,可能需要对多个节点进行参数设置,例如需要设定时区、语言甚至是root用户密码,需要运维人员花费大量时间参与安装过程,降低了大数据集群的安装速度和运维效率。
技术实现思路
本专利技术实施例提供一种能提高大数据集群的安装效率的大数据集群管理控制方法、装置、计算机设备及存储介质。为解决上述技术问题,本专利技术创造的实施例采用的一个技术方案是:提供一种大数据集群管理控制方法,包括下述步骤:获取分布式服务器集群中各目标站点的环境信息;根据所述各目标站点的环境信息对应的配置每个目标站点的配置文件;根据各配置文件和预设的大数据集群镜像文件对应地对每个目标站点进行大数据集群系统管理控制。可选地,所述获取分布式服务器集群中各目标站点的环境信息的步骤之前,还包括如下述步骤:获取本地系统的内核配置参数;根据所述内核配置参数设置预设原始镜像的基本参数生成所述大数据集群镜像文件。可选地,所述获取本地系统的内核配置参数的步骤,包括如下述步骤:>获取所述本地系统的原始软件包管理信息;根据所述原始软件包管理信息获取与所述本地系统相对应的安装软件包,其中,所述安装软件包包括所述内核配置参数。可选地,所述根据所述各目标站点的环境信息对应的配置每个目标站点的配置文件的步骤,包括如下述步骤:获取包括相应目标站点的文件共享终端信息的各个文件共享目录,其中,任一文件共享终端信息包括相应目标站点的配置文件的地址信息;根据各个地址信息获取相应目标站点的配置文件,并根据相应目标站点的环境信息配置所述配置文件。可选地,所述获取包括所述各目标站点的文件共享终端信息的文件共享目录的步骤之前,还包括如下述步骤:在所述各目标站点上安装并启动预设的文件共享服务;根据各目标站点相应的文件共享服务分别创建包括相应目标站点的文件共享终端信息的文件共享目录。可选地,所述根据各配置文件和预设的大数据集群镜像文件对应地对每个目标站点进行大数据集群系统管理控制的步骤,包括如下述步骤:获取各目标站点的局域网地址信息;根据各目标站点的局域网地址信息建立大数据集群镜像文件与相应目标站点的对应关系;根据所述对应关系将大数据集群镜像文件发送至相应目标站点,以使各目标站点安装大数据集群镜像文件生成大数据集群系统,并根据相应配置文件设置大数据集群系统的参数。为解决上述技术问题,本专利技术实施例还提供一种大数据集群管理控制装置,包括:第一获取模块,用于获取分布式服务器集群中各目标站点的环境信息;第一处理模块,用于根据所述各目标站点的环境信息对应的配置每个目标站点的配置文件;第一执行模块,用于根据各配置文件和预设的大数据集群镜像文件对应地对每个目标站点进行大数据集群系统管理控制。可选地,还包括:第二获取模块,用于获取本地系统的内核配置参数;第二执行模块,用于根据所述内核配置参数设置预设原始镜像的基本参数生成所述大数据集群镜像文件。可选地,还包括:第一获取子模块,用于获取所述本地系统的原始软件包管理信息;第一执行子模块,用于根据所述原始软件包管理信息获取与所述本地系统相对应的安装软件包,其中,所述安装软件包包括所述内核配置参数。可选地,还包括:第二获取子模块,用于获取包括相应目标站点的文件共享终端信息的各个文件共享目录,其中,任一文件共享终端信息包括相应目标站点的配置文件的地址信息;第二执行子模块,用于根据各个地址信息获取相应目标站点的配置文件,并根据相应目标站点的环境信息配置所述配置文件。可选地,还包括:第一处理子模块,用于在所述各目标站点上安装并启动预设的文件共享服务;第三执行子模块,用于根据各目标站点相应的文件共享服务分别创建包括相应目标站点的文件共享终端信息的文件共享目录。可选地,还包括:第三获取子模块,用于获取各目标站点的局域网地址信息;第二处理子模块,用于根据各目标站点的局域网地址信息建立大数据集群镜像文件与相应目标站点的对应关系;第三执行子模块,用于根据所述对应关系将大数据集群镜像文件发送至相应目标站点,以使各目标站点安装大数据集群镜像文件生成大数据集群系统,并根据相应配置文件设置大数据集群系统的参数。为解决上述技术问题,本专利技术实施例还提供一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机可读指令,所述计算机可读指令被所述处理器执行时,使得所述处理器执行上述大数据集群管理控制方法的步骤。为解决上述技术问题,本专利技术实施例还提供一种存储有计算机可读指令的存储介质,所述计算机可读指令被一个或多个处理器执行时,使得一个或多个处理器执行上述大数据集群管理控制方法的步骤。本专利技术实施例的有益效果为:通过获取分布式服务器集群中各目标站点的环境信息,再根据该各目标站点的环境信息对应的配置每个目标站点的配置文件,然后根据各配置文件和预设的大数据集群镜像文件对应地对每个目标站点进行大数据集群系统管理控制,批量进行大数据集群系统的安装和参数配置,能有效加快大数据集群的安装速度,提高大数据集群的运维效率。附图说明为了更清楚地说明本专利技术实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。图1为本专利技术实施例大数据集群管理控制方法的基本流程示意图;图2为本专利技术实施例自定义大数据集群镜像文件的流程示意图;图3为本专利技术实施例获取本地系统的内核配置参数的流程示意图;图4为本专利技术实施例设置配置文件的流程示意图;图5为本专利技术实施例创建文件共享目录的基本流程示意图;图6为本专利技术实施例安装大数据集群系统的基本流程示意图;图7为本专利技术实施例大数据集群管理控制装置的基本结构示意图;图8为本专利技术实施例计算机设备基本结构框图。具体实施方式为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述。在本专利技术的说明书和权利要求书及上述附图中的描述的一些流程中,包含了按照特定顺序出现的多个操作,但是应该清楚了解,这些操作可以不按照其在本文中出现的顺序来执行或并行执行,操作的序号如101、1本文档来自技高网...

【技术保护点】
1.一种大数据集群管理控制方法,其特征在于,包括下述步骤:/n获取分布式服务器集群中各目标站点的环境信息;/n根据所述各目标站点的环境信息对应的配置每个目标站点的配置文件;/n根据各配置文件和预设的大数据集群镜像文件对应地对每个目标站点进行大数据集群系统管理控制。/n

【技术特征摘要】
1.一种大数据集群管理控制方法,其特征在于,包括下述步骤:
获取分布式服务器集群中各目标站点的环境信息;
根据所述各目标站点的环境信息对应的配置每个目标站点的配置文件;
根据各配置文件和预设的大数据集群镜像文件对应地对每个目标站点进行大数据集群系统管理控制。


2.根据权利要求1所述的大数据集群管理控制方法,其特征在于,所述获取分布式服务器集群中各目标站点的环境信息的步骤之前,还包括如下述步骤:
获取本地系统的内核配置参数;
根据所述内核配置参数设置预设原始镜像的基本参数生成所述大数据集群镜像文件。


3.根据权利要求2所述的大数据集群管理控制方法,其特征在于,所述获取本地系统的内核配置参数的步骤,包括如下述步骤:
获取所述本地系统的原始软件包管理信息;
根据所述原始软件包管理信息获取与所述本地系统相对应的安装软件包,其中,所述安装软件包包括所述内核配置参数。


4.根据权利要求1所述的大数据集群管理控制方法,其特征在于,所述根据所述各目标站点的环境信息对应的配置每个目标站点的配置文件的步骤,包括如下述步骤:
获取包括相应目标站点的文件共享终端信息的各个文件共享目录,其中,任一文件共享终端信息包括相应目标站点的配置文件的地址信息;
根据各个地址信息获取相应目标站点的配置文件,并根据相应目标站点的环境信息配置所述配置文件。


5.根据权利要求4所述的大数据集群管理控制方法,其特征在于,所述获取包括所述各目标站点的文件共享终端信息的文件共享目录的步骤之前,还包括如下述步骤:
在所述各目标站点上安装并启动预设的文件共享服务;
根据各目标站点相应的文件共享服务分别创建包括相应目...

【专利技术属性】
技术研发人员:于奇龙乐乐贾宏超王世星盖守文安天元姚亚峰
申请(专利权)人:望海康信北京科技股份公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1