Hadoop集群环境部署介绍

Hadoop集群环境搭建是不少学习hadoop学习者或者是使用者都必然要面对的一个问题，网上关于hadoop集群环境搭建的博文教程也蛮多的。对于玩hadoop的高手来讲确定没有什么问题，甚至能够说事“手到擒来”的事情，但对于hadoop的初学者来讲，hadoop集群环境的搭建着实压力不小。

网上关于hadoop集群环境搭建的文章有不少，能够说是“图文并茂”，对于新手而言即便步骤再详细，但看着这么多步骤，那么多的指令确定是会以为很繁琐的。毕竟都是从菜鸟一步一步过来的，记得当初作hadoop集群环境搭建真的是很烦琐。

目前国内的hadoop商业发行版虽然比较多，可是在集群环境的搭建方面基本都很相似或者是相同，指令多、步骤繁琐。有的时候以为难免以为很奇怪，这些发行商为何不对hadoop的集群环境部署作一下优化呢？幸运的是总算是让我找到了一个hadoop发行版集群环境搭建简单易用。

这里使用的是一款国产的hadoop发行版，大快搜索推出的DKhadoop。集群环境的部署整体给个人感受是比较简单易用，不像之前的一些发行版那么繁琐。下面就给你们以DKhadoop为例介绍一下这种简单易用的hadoop集群环境搭建。

一、为集群自定义一个名称：在安装集群组建以前安装程序须要对主机进行一些环境检查工做，DKhadoop须要root权限，并经过ssh连接到主机。

 

二、选择安装模式，安装模式有三种能够选择，分别是基础安装、完整安装和自定义安装。基本安装中包含的服务内容有：hafs-2.6.0的安装、JDK1.7.0_79安装、Yarn-2.6.0安装以及zooleeper-3.4.6安装

 

三、若是选择完整安装模式，则须要安装的服务内容会更多，详细能够的参考下方图示内容以及说明部分介绍。

 

四、自定义安装模式则能够自主的进行角色配置，经过对主机性能的检测DKhadoop会按照主机性能推荐相应的分配设置。 

五、从上述3种安装模式中选择一个合适的模式后，点击右下角的【继续】将自动进行组建的安装，全部组建安装成功后也就完成了集群环境的部署。

 

这套DKhadoop的集群环境部署是已经被优化过的了，我的以为简单易用。感兴趣的朋友能够本身去看一下！