3分钟快速搭建Greenplum集群

Greenplum做为一个分布式计算平台,集群中有不一样角色的节点,好比master,segment,甚至专门的etl服务器。完整的部署一个Greenplum集群一般须要多个物理机,并花费数天甚至数周的时间。而利用docker和docker-compose,启动一个gp集群其实只须要几分钟而已。本文将介绍如何快速在docker中启动Greenplum 集群。git

一、准备工做

首先从github下载docker的配置文件:github

git clone https://github.com/lij55/gphost.git

而后从Greenplum官网(https://network.pivotal.io/)...,gphost的docker使用的CentOS7镜像。若是用gp5的环境,就将对应的rpm放到example5/目录;若是用gp6的环境,就将对应的rpm放到example6/目录。这里以gp6为例,下载6.8的安装文件greenplum-db-6.8.0-rhel7-x86_64.rpm,放到example6目录下,执行ls能够看到内容大体以下:docker

$ ls -1 example6
build.sh
docker-compose.yaml
Dockerfile
greenplum-db-6.8.0-rhel7-x86_64.rpm
readme.org
reset

二、运行容器

docker-compose.yaml文件中定义了运行时依赖的docker容器,默认有1个master节点,2个segment节点和1个etl服务器。若是须要增长更多segment机器或者修改端口,能够修改docker-compose.yaml。而后启动容器:segmentfault

# cd example6
docker build . -t mygreenplum6
docker-compose up -d

容器启动好以后,能够经过ssh或者docker-compose的exec命令链接到master节点;这里须要注意的是必定要用gpadmin用户,假定master上ssh端口为6222,ssh的登陆命令为:bash

ssh -p 6222 gpadmin@127.0.0.1

密码为changeme服务器

三、初始化集群

在master节点,执行以下命令来,生成初始化配置的脚本ssh

artifiact/prepare.sh -s 2 -n 2
  • -s 表示有2个segment机器(容器)
  • -n 表示在每一个segment机器上建立2个primary节点

而后运行gpinitsystem命令来进行初始化。分布式

gpinitsystem -a -c gpinitsystem_config

不出意外的话greenplum集群就启动成了。preprare.sh脚本还生成了env.sh文件,方便配置gp须要的环境变量。此外,还有artifact/post.sh脚本会进行一些方便的设置,例如打开gpadmin的远程无密码访问,将env.sh加入gpadmin用户的bash环境变量等。直接执行便可:工具

artifact/postinstall.sh

四、管理集群

集群建立后,能够经过docker-compose命令来管理集群:post

docker-compose exec -u gpadmin mdw bash -i -c "gpstop -a"

而从新启动集群的命令为:

docker-compose exec -u gpadmin mdw bash -i -c "gpstart -a"

gp的服务映射到本机的6432端口,能够用任何gp的客户端工具,好比dbeavor或者pgadmin进行访问。

五、后续工做

  • 增长mirror和standby master的支持
  • 支持更多的组件,好比pxf,madlib等
  • 支持开源版gp
  • 进一步简须要手动执行的操做 欢迎你们到github上提issue,PR

image

相关文章
相关标签/搜索