windows下使用Eclipse运行MapReduce程序出错: Failed to set...

在windows下用Eclipse运行MapReduce程序会报错:

12/04/24 15:32:44 WARN util.NativeCodeLoader: Unable to load native-hadoop     library for your platform... using builtin-java classes where applicable
12/04/24 15:32:44 ERROR security.UserGroupInformation:     PriviledgedActionException as:Administrator cause:java.io.IOException: Failed to set     permissions of path: \tmp\hadoop-Administrator\mapred\staging\Administrator-    519341271\.staging to 0700
Exception in thread "main" java.io.IOException: Failed to set permissions of path: \tmp\hadoop-Administrator\mapred\staging\Administrator-519341271\.staging to 0700

这个问题在网上很常见了, 搜下有不少, 缘由和解决方案:

这个是Windows下文件权限问题，在Linux下能够正常运行，不存在这样的问题。

解决方法是将hadoop-x.x.x/src/core/org/apache/hadoop/fs/FileUtil.java里面方法checkReturnValue的代码注释掉.

再从新编译生成hadoop-x.x.x-core.jar.

关键问题是怎么从新编译? 因而网上找怎么编译Hadoop的方法, 原本一个很简单的问题弄了好久都没解决掉.

其实方法很简单, 不用从新编译Hadoop, 仅编译FileUtil.java便可.

新建一个MapReduce项目, 把hadoop-x.x.x/src/core/org/apache/hadoop/fs/FileUtil.java代码复制到src下(注意, 目录结构也须要), 按上面修改文件, 而后从新build下, 找到编译好的.class(两个), 用解压软件打开hadoop-x.x.x-core.jar, 把这两个class文件覆盖便可.