在eclipse中操作HDFS

本文主要讲述如何在本地eclipse操作HDFS集群

1.配置hadoop的插件,以便在eclipse中操作HDFS

1)在eclipse的安装路径下查看是否有dropins文件夹,若没有则新建一个。

2)在dropins文件夹下创建plugins文件夹。

3)把hadoop-eclipse-plugin-2.6.0.jar包放到plugins文件夹下。

2.重启eclipse

1)点击windows-show view,找到Map/Reduce Location视图并显示。

2)在Map/Reduce Location视图下新建hdfs。

3)配置hdfs。

4)左上角的项目目录会显示如下状态。

3.Java API操作HDFS 1).导入jar包 进入到hadoop安装包的share/hadoop目录下,将common、hdfs、tools目录下的以及lib下的jar导入到我们的项目中并buildpath。 2).操作HDFS